Javascript:<audio>.captureStream() 是否在没有 play() 的情况下工作?

208*_*080 6 html javascript media

在浏览器中,我想捕获以 .mp3 作为源的音频标签的流,然后通过 WebRTC 将其实时发送到服务器。我不想通过扬声器听到它。

是否可以在没有扬声器输出的情况下调用 audioElement.play()?

khi*_*ner 5

new Audio()返回HTMLAudioElement连接到浏览器默认音频输出设备的 。您可以通过运行在开发控制台中验证这一点:

> new Audio().sinkId
<- ""
Run Code Online (Sandbox Code Playgroud)

其中空字符串输出指定用户代理 defaultsinkId

HTMLAudioElement实例的输出连接到非默认接收器的灵活方法(例如,如果您不想通过扬声器听到它而只想将其发送到另一个目的地,如WebRTC 对等连接),是使用全局AudioContext对象创建一个新的MediaStreamAudioDestinationNode. 然后,您可以通过,MediaElementAudioSourceNodeAudio保存 mp3 文件的对象中获取audioContext.createMediaElementSource(mp3Audio),并将其连接到新的音频目标节点。然后,当您运行 时mp3Audio.play(),它只会流到目标节点,而不是默认(扬声器)音频输出。

完整示例:

// Set up the audio node source and destination...
const mp3FilePath = 'testAudioSample.mp3'
const mp3Audio = new Audio(mp3FilePath)
const audioContext = new AudioContext()
const mp3AudioSource = audioContext.createMediaElementSource(mp3Audio)
const mp3AudioDestination = audioContext.createMediaStreamDestination()
mp3AudioSource.connect(mp3AudioDestination)

// Connect the destination track to whatever you want,
// e.g. another audio node, or an RTCPeerConnection.
const mp3AudioTrack = mp3AudioDestination.stream.getAudioTracks()[0]
const pc = new RTCPeerConnection()
pc.addTrack(track)

// Prepare the `Audio` instance playback however you'd like.
// For example, loop it:
mp3Audio.loop = true

// Start streaming the mp3 audio to the new destination sink!
await mp3Audio.play()
Run Code Online (Sandbox Code Playgroud)


208*_*080 2

似乎可以将音频元素静音并仍然捕获流:

audioElement.muted = true; var stream = audioElement.captureStream();

  • 从 Chrome 86 开始,这似乎不再起作用。当音频元素取消静音时,生成的流仅具有音频。 (5认同)