Contrôler le panoramique, l'inclinaison et le zoom de la caméra

Les fonctionnalités de panoramique, d'inclinaison et de zoom des caméras sont enfin contrôlables sur le Web.

François Beaufort
François Beaufort

Les solutions de visioconférence à l'échelle d'une pièce déploient des caméras dotées de fonctionnalités de panoramique, d'inclinaison et de zoom (PTZ) afin que le logiciel puisse pointer la caméra vers les participants à la réunion. À partir de Chrome 87, les fonctionnalités de panoramique, d'inclinaison et de zoom des caméras sont disponibles pour les sites Web qui utilisent des contraintes de suivi multimédia dans MediaDevices.getUserMedia() et MediaStreamTrack.applyConstraints().

Utiliser l'API

Détection de caractéristiques

La détection des fonctionnalités matérielles est différente de celle à laquelle vous êtes probablement habitué. La présence des noms de contraintes "pan", "tilt" et "zoom" dans navigator.mediaDevices.getSupportedConstraints() vous indique que le navigateur est compatible avec l'API permettant de contrôler le PTZ de la caméra, mais pas si le matériel de la caméra est compatible. Depuis Chrome 87, le contrôle PTZ de la caméra est compatible avec les ordinateurs, tandis qu'Android n'est toujours compatible qu'avec le zoom.

const supports = navigator.mediaDevices.getSupportedConstraints();
if (supports.pan && supports.tilt && supports.zoom) {
  // Browser supports camera PTZ.
}

Demander l'accès PTZ à la caméra

Un site Web n'est autorisé à contrôler les fonctions PTZ de la caméra que si l'utilisateur a explicitement accordé l'autorisation correspondante via une invite.

Pour demander l'accès PTZ à la caméra, appelez navigator.mediaDevices.getUserMedia() avec les contraintes PTZ, comme indiqué ci-dessous. L'utilisateur sera alors invité à accorder les autorisations d'accès à la caméra standard et à la caméra avec PTZ.

Capture d'écran d'une invite utilisateur PTZ de caméra dans Chrome pour macOS.
Invite utilisateur de la caméra PTZ.

La promesse renvoyée est résolue avec un objet MediaStream utilisé pour afficher le flux vidéo de la caméra à l'utilisateur. Si la caméra n'est pas compatible avec le PTZ, l'utilisateur reçoit une invite de caméra standard.

try {
  // User is prompted to grant both camera and PTZ access in a single call.
  // If camera doesn't support PTZ, it falls back to a regular camera prompt.
  const stream = await navigator.mediaDevices.getUserMedia({
    // Website asks to control camera PTZ as well without altering the
    // current pan, tilt, and zoom settings.
    video: { pan: true, tilt: true, zoom: true }
  });

  // Show camera video stream to user.
  document.querySelector("video").srcObject = stream;
} catch (error) {
  // User denies prompt or matching media is not available.
  console.log(error);
}

Une autorisation d'accès à l'appareil photo précédemment accordée, en particulier une autorisation sans accès PTZ, n'obtient pas automatiquement l'accès PTZ si celui-ci devient disponible. Cela est vrai même si la caméra elle-même est compatible avec le PTZ. L'autorisation doit être demandée à nouveau. Heureusement, vous pouvez utiliser l'API Permissions pour interroger et surveiller l'état de l'autorisation PTZ.

try {
  const panTiltZoomPermissionStatus = await navigator.permissions.query({
    name: "camera",
    panTiltZoom: true
  });

  if (panTiltZoomPermissionStatus.state == "granted") {
    // User has granted access to the website to control camera PTZ.
  }

  panTiltZoomPermissionStatus.addEventListener("change", () => {
    // User has changed PTZ permission status.
  });
} catch (error) {
  console.log(error);
}

Pour savoir si un navigateur basé sur Chromium est compatible avec les commandes PTZ d'une caméra, accédez à la page interne about://media-internals et consultez la colonne "Pan-Tilt-Zoom" (Panoramique, inclinaison et zoom) de l'onglet "Video Capture" (Capture vidéo). "pan tilt" et "zoom" signifient respectivement que la caméra est compatible avec les commandes UVC "PanTilt (Absolute)" (Panoramique, inclinaison (absolu)) et "Zoom (Absolute)" (Zoom (absolu)). Les commandes UVC "PanTilt (Relative)" et "Zoom (Relative)" ne sont pas compatibles avec les navigateurs basés sur Chromium.

Page de débogage interne de ChromeOS.
Page interne pour déboguer la compatibilité avec les caméras PTZ.

Contrôler la caméra PTZ

Manipulez les fonctionnalités et les paramètres PTZ de la caméra à l'aide de l'aperçu MediaStreamTrack de l'objet stream obtenu précédemment. MediaStreamTrack.getCapabilities() renvoie un dictionnaire avec les fonctionnalités compatibles et les plages ou valeurs autorisées. De même, MediaStreamTrack.getSettings() renvoie les paramètres actuels.

Les fonctionnalités et les paramètres de panoramique, d'inclinaison et de zoom ne sont disponibles que si la caméra les prend en charge et que l'utilisateur a accordé l'autorisation PTZ à la caméra.

Contrôle de la caméra PTZ

Appelez videoTrack.applyConstraints() avec les contraintes avancées PTZ appropriées pour contrôler le panoramique, l'inclinaison et le zoom de la caméra, comme illustré dans l'exemple. La promesse renvoyée est résolue si l'opération réussit. Il est rejeté si :

  • L'autorisation PTZ n'est pas accordée à la caméra.
  • Le matériel de la caméra n'est pas compatible avec la contrainte PTZ.
  • La page n'est pas visible par l'utilisateur. Utilisez l'API Page Visibility pour détecter les changements de visibilité de la page.
// Get video track capabilities and settings.
const [videoTrack] = stream.getVideoTracks();
const capabilities = videoTrack.getCapabilities();
const settings = videoTrack.getSettings();

// Let the user control the camera pan motion if the camera supports it
// and PTZ access is granted.
if ("pan" in settings) {
  const input = document.querySelector("input[type=range]");
  input.min = capabilities.pan.min;
  input.max = capabilities.pan.max;
  input.step = capabilities.pan.step;
  input.value = settings.pan;

  input.addEventListener("input", async () => {
    await videoTrack.applyConstraints({ advanced: [{ pan: input.value }] });
  });
}

if ("tilt" in settings) {
  // similar for tilt...
}
if ("zoom" in settings) {
  // similar for zoom...
}

Il est également possible de configurer le panoramique, l'inclinaison et le zoom de la caméra en appelant navigator.mediaDevices.getUserMedia() avec des valeurs de contrainte idéales pour le PTZ de la caméra. Cette option est utile lorsque les fonctionnalités PTZ de la caméra sont connues à l'avance. Notez que les contraintes obligatoires (min, max, exact) ne sont pas autorisées ici.

const stream = await navigator.mediaDevices.getUserMedia({
  // Website asks to reset known camera pan.
  video: { pan: 0, deviceId: { exact: "myCameraDeviceId" } }
});

Aire de jeu

Vous pouvez tester l'API en exécutant la démo.

Considérations de sécurité

Les auteurs de la spécification ont conçu et implémenté cette API en utilisant les principes fondamentaux, y compris le contrôle de l'utilisateur, la transparence et l'ergonomie. La possibilité d'utiliser cette API est principalement régie par le même modèle d'autorisation que l'API Media Capture and Streams. En réponse à une requête de l'utilisateur, le site Web est autorisé à contrôler le PTZ de la caméra uniquement lorsque la page est visible par l'utilisateur.

Compatibilité du navigateur

API MediaStream

Browser Support

  • Chrome: 55.
  • Edge: 12.
  • Firefox: 15.
  • Safari: 11.

Source

API Permissions

Browser Support

  • Chrome: 43.
  • Edge: 79.
  • Firefox: 46.
  • Safari: 16.

Source

API Page Visibility

Browser Support

  • Chrome: 33.
  • Edge: 12.
  • Firefox: 18.
  • Safari: 7.

Source

MediaDevices.getUserMedia()

Browser Support

  • Chrome: 53.
  • Edge: 12.
  • Firefox: 36.
  • Safari: 11.

Source

MediaDevices.getSupportedConstraints()

Browser Support

  • Chrome: 53.
  • Edge: 12.
  • Firefox: 44.
  • Safari: 11.

Source

MediaStreamTrack.applyConstraints()

Browser Support

  • Chrome: 59.
  • Edge: 12.
  • Firefox: 43.
  • Safari: 11.

Source

MediaStreamTrack.getCapabilities()

Browser Support

  • Chrome: 59.
  • Edge: 12.
  • Firefox: 132.
  • Safari: 11.

Source

MediaStreamTrack.getSettings()

Browser Support

  • Chrome: 59.
  • Edge: 12.
  • Firefox: 50.
  • Safari: 11.

Source

Liens utiles

Remerciements

Cet article a été examiné par Joe Medley et Thomas Steiner. Merci à Rijubrata Bhaumik et Eero Häkkinen d'Intel pour leur travail sur la spécification et l'implémentation.