将 audioContext 转换回缓冲区

Convert audioContext back into Buffers

我有一个从 createMediaElementSource 获取其媒体的 audioContext。我想在进入 AudioBuffers 或类似的东西时解析这个音频,我可以通过 websockets 发送给另一个客户端。

let audioElement = document.querySelector('video')
let audioContext = new window.AudioContext()
let source = audioContext.createMediaElementSource(audioElement)
source.connect(deliverToOtherClientOrSomething)

我尝试制作 AudioWorkletNode,但这种方法的问题是它不允许我在那里结束链,而是迫使我将音频转发到其他某个 AudioContext 元素,即不需要。

所以,最后这个问题是通过使用音频工作集节点解决的。创建 AudioWorkletNode 时,可以将选项传递给它。其中一个选项是 numberOfOutputs。通过这样做,我的问题得到了完全回答。

主文件

const sendProcessor = new AudioWorkletNode(audioContext, 'send-processor', {numberOfOutputs:0})
sendProcessor.port.onmessage = (event) => {
    callback(event.data);
}

处理器文件

process(inputs, outputs) {
    this.port.postMessage(inputs[0][0]);
    return true;
}