Как обработать звук с микрофона пользователя

Франсуа Бофор
François Beaufort

Доступ к камере и микрофону пользователя возможен на веб-платформе с помощью API Media Capture and Streams . Метод getUserMedia() предлагает пользователю доступ к камере и/или микрофону для записи медиапотока. Этот поток затем может быть обработан в отдельном потоке Web Audio с помощью AudioWorklet , который обеспечивает очень низкую задержку обработки звука.

В примере ниже показано, как можно эффективно обрабатывать звук с микрофона пользователя.

let stream;

startMicrophoneButton.addEventListener("click", async () => {
  // Prompt the user to use their microphone.
  stream = await navigator.mediaDevices.getUserMedia({
    audio: true,
  });
  const context = new AudioContext();
  const source = context.createMediaStreamSource(stream);

  // Load and execute the module script.
  await context.audioWorklet.addModule("processor.js");
  // Create an AudioWorkletNode. The name of the processor is the
  // one passed to registerProcessor() in the module script.
  const processor = new AudioWorkletNode(context, "processor");

  source.connect(processor).connect(context.destination);
  log("Your microphone audio is being used.");
});

stopMicrophoneButton.addEventListener("click", () => {
  // Stop the stream.
  stream.getTracks().forEach(track => track.stop());

  log("Your microphone audio is not used anymore.");
});
// processor.js
// This file is evaluated in the audio rendering thread
// upon context.audioWorklet.addModule() call.

class Processor extends AudioWorkletProcessor {
  process([input], [output]) {
    // Copy inputs to outputs.
    output[0].set(input[0]);
    return true;
  }
}

registerProcessor("processor", Processor);

Поддержка браузеров

MediaDevices.getUserMedia()

Browser Support

  • Хром: 53.
  • Край: 12.
  • Firefox: 36.
  • Сафари: 11.

Source

Веб-аудио

Browser Support

  • Хром: 35.
  • Край: 12.
  • Firefox: 25.
  • Сафари: 14.1.

Source

AudioWorklet

Browser Support

  • Хром: 66.
  • Край: 79.
  • Firefox: 76.
  • Сафари: 14.1.

Source

Дальнейшее чтение

Демо

Открытая демоверсия