录制用户的视频

Mat Scales

许多浏览器现在都可以访问用户的视频和音频输入。不过,根据浏览器的不同,这一功能可能体现为一种全动态的内置体验,也可能通过授权给用户设备上的其他应用来实现。

最简易的做法是直接要求用户提供预先录制的文件。为此,请创建一个简单的文件输入元素,然后添加 accept 过滤条件(指示我们只能接受视频文件)和 capture 属性(指示我们想要直接从相机获取视频文件)。

<input type="file" accept="video/*" capture />

此方法适用于所有平台。在桌面设备上,它会提示用户从文件系统上传文件(忽略 capture 属性)。在 iOS 上的 Safari 中,它会打开相机应用以便您录制视频,然后将其传回网页;在 Android 上,它允许用户选择使用哪一个应用来录制视频,录制完毕后将其传回网页。

许多移动设备都有多个摄像头。如果您有偏好设置,则可以将 capture 属性设置为 user(如果您希望摄像头朝向用户),或设置为 environment(如果您希望摄像头朝向外面)。

<input type="file" accept="video/*" capture="user" />
<input type="file" accept="video/*" capture="environment" />

请注意,这只是一个提示 - 如果浏览器不支持该选项,或者您请求的摄像头类型不可用,浏览器可能会选择其他摄像头。

用户完成录制并返回网站后,您需要以某种方式掌握文件数据。为 input 元素附加一个 onchange 事件,然后读取事件对象的 files 属性,便可快速获得文件访问权。

<input type="file" accept="video/*" capture="camera" id="recorder" />
<video id="player" controls></video>
<script>
  var recorder = document.getElementById('recorder');
  var player = document.getElementById('player');

  recorder.addEventListener('change', function (e) {
    var file = e.target.files[0];
    // Do something with the video file.
    player.src = URL.createObjectURL(file);
  });
</script>

获得对文件的访问权后,便可随意对其执行任何操作。例如,您可以:

  • 将其直接附加到 <video> 元素,以便播放
  • 将其下载到用户的设备上
  • 通过将其附加到 XMLHttpRequest,上传至服务器
  • 将帧绘制到画布并对其应用滤镜

尽管使用 input 元素方法获得对视频数据访问权的情况普遍存在,却是最没有吸引力的方案。因为我们真正需要的是获得对相机的访问权,直接在页面内提供良好的体验。

以交互方式访问摄像头

现代浏览器可直连摄像头,我们可以借此打造与网页完全集成的体验,让用户永远都不需要离开浏览器。

获得相机使用权限

我们可以利用 WebRTC 规范中名为 getUserMedia() 的 API 直接访问摄像头。getUserMedia() 会提示用户授予对其相连麦克风和摄像头的访问权。

如果授权成功,该 API 将返回一个 Stream,其中包含来自摄像头或麦克风的数据,然后我们可以将数据附加到一个 <video> 元素、将其附加到一个 WebRTC 串流,或使用 MediaRecorder API 对其进行保存。

如需从摄像头获取数据,我们只需在传递给 getUserMedia() API 的约束对象中设置 video: true

<video id="player" controls></video>
<script>
  var player = document.getElementById('player');

  var handleSuccess = function (stream) {
    player.srcObject = stream;
  };

  navigator.mediaDevices
    .getUserMedia({audio: true, video: true})
    .then(handleSuccess);
</script>

如果您想选择特定摄像头,可以先枚举可用的摄像头。

navigator.mediaDevices.enumerateDevices().then((devices) => {
  devices = devices.filter((d) => d.kind === 'videoinput');
});

然后,您可以在调用 getUserMedia 时传递要使用的 deviceId。

navigator.mediaDevices.getUserMedia({
  audio: true,
  video: {
    deviceId: devices[0].deviceId,
  },
});

这段代码本身的用处并不大。我们所能做的就是获取视频数据并进行播放。

访问相机中的原始数据

如需访问摄像头的原始视频数据,您可以将每个帧绘制到 <canvas> 中,然后直接操控像素。

对于 2D 画布,您可以使用上下文的 drawImage 方法将 <video> 元素的当前帧绘制到画布中。

context.drawImage(myVideoElement, 0, 0);

在 WebGL 画布中,您可以使用 <video> 元素作为纹理的来源。

gl.texImage2D(
  gl.TEXTURE_2D,
  0,
  gl.RGBA,
  gl.RGBA,
  gl.UNSIGNED_BYTE,
  myVideoElement,
);

请注意,无论是哪种情况,此操作都会使用正在播放的视频的当前帧。如需处理多个帧,您需要每次将视频重新绘制到画布上。

如需了解详情,请参阅我们有关对图片和视频应用实时效果的文章。

保存摄像头中的数据

如需保存相机中的数据,最简单的方法是使用 MediaRecorder API。

MediaRecorder API 将获取 getUserMedia 创建的数据流,然后渐进式地将数据流中的数据保存到首选目的地。

<a id="download">Download</a>
<button id="stop">Stop</button>
<script>
  let shouldStop = false;
  let stopped = false;
  const downloadLink = document.getElementById('download');
  const stopButton = document.getElementById('stop');

  stopButton.addEventListener('click', function() {
    shouldStop = true;
  })

  var handleSuccess = function(stream) {
    const options = {mimeType: 'video/webm'};
    const recordedChunks = [];
    const mediaRecorder = new MediaRecorder(stream, options);

    mediaRecorder.addEventListener('dataavailable', function(e) {
      if (e.data.size > 0) {
        recordedChunks.push(e.data);
      }

      if(shouldStop === true && stopped === false) {
        mediaRecorder.stop();
        stopped = true;
      }
    });

    mediaRecorder.addEventListener('stop', function() {
      downloadLink.href = URL.createObjectURL(new Blob(recordedChunks));
      downloadLink.download = 'acetest.webm';
    });

    mediaRecorder.start();
  };

  navigator.mediaDevices.getUserMedia({ audio: true, video: true })
      .then(handleSuccess);
</script>

在我们这种情况下,我们要将数据直接保存到一个数组中,然后在稍后转换成 Blob 后再将其保存到网络服务器,或直接保存在用户设备的存储内。

以负责任的方式请求相机使用权限

如果用户之前未授予网站对摄像头的访问权,则调用 getUserMedia 时浏览器会立即提示用户授予网站对摄像头的访问权。

用户讨厌在其机器上收到要求访问功能强大设备的提示,他们经常会屏蔽请求,或者如果他们不了解提示的上下文,则会忽略该请求。最佳做法是在首次需要权限时只请求访问摄像头。一旦用户授予了访问权限,就不会再次收到提示,但如果他们拒绝授权,您就无法再次获得访问权限以向用户请求权限。

使用 Permissions API 确认是否已获得访问权限

使用 getUserMedia API 时,您无法得知自己是否已获得相机访问权限。这就带来了一个问题:为了提供友善的界面,让用户愿意授予对相机的访问权,您就必须请求获得对相机的访问权。

在某些浏览器中,可以利用 Permission API 来解决这个问题。借助 navigator.permission API,您无需再次提示用户便可查询到访问特定 API 能力的状态。

如需查询是否有权访问用户的相机,您可以将 {name: 'camera'} 传入 query 方法,后者将返回:

  • granted - 用户之前已授予对摄像头的访问权;
  • prompt - 用户尚未授予您访问权限,系统会在您调用 getUserMedia 时提示您;
  • denied - 系统或用户已显式屏蔽对摄像头的访问权限,您将无法获得对其的访问权限。

现在您就可以进行快速检查,以确认是否需要改动用户界面来适应用户需要执行的操作。

navigator.permissions.query({name: 'camera'}).then(function (result) {
  if (result.state == 'granted') {
  } else if (result.state == 'prompt') {
  } else if (result.state == 'denied') {
  }
  result.onchange = function () {};
});

反馈