多个文件播放器上的 Core Audio 声音计量

Question

我有一个 AUGraph 设置，其中有几个文件播放器音频单元馈送到 MultiChannelMixer 单元，然后馈送到远程 I/O 输出。这个设置工作得很好。

现在我一直在努力添加一个回调，以便我可以计算各个文件播放器的音量。

private let meteringCallback: AURenderCallback = { (
    inRefCon,
    ioActionFlags,
    inTimeStamp,
    inBusNumber,
    frameCount,
    ioData ) -> OSStatus in

    var status = noErr

    var track: AUTrack = unsafeBitCast(inRefCon, to: AUTrack.self)

    status = AudioUnitRender(track.fileAU!,
                             ioActionFlags,
                             inTimeStamp,
                             inBusNumber,
                             frameCount,
                             ioData!);

    var samples = [Float]()
    let ptr = ioData!.pointee.mBuffers.mData?.assumingMemoryBound(to: Float.self)
    samples.append(contentsOf: UnsafeBufferPointer(start: ptr, count: Int(frameCount)))

    // ... fancy algorithm calculating DB value ...
}

AUTrack 简单保存有关该特定轨道的信息。将整个 class 实例传递给回调（如通常在示例中所做的那样）在这里没有意义，因为有多个文件播放器。

现在我需要在某处设置这个回调，这样我就可以从每个文件播放器中获取输入混音器的值。然而，当我尝试这样做时，我不断收到 -10877（无效元素）错误。

我尝试用这个设置计量回调。

// Set metering callback
var meteringCallbackStruct = AURenderCallbackStruct(inputProc: meteringCallback,
                                                    inputProcRefCon: &self.tracks[1])
status = AudioUnitSetProperty(self.tracks[1].fileAU!,
                          kAudioUnitProperty_SetRenderCallback,
                          kAudioUnitScope_Output,
                          0,
                          &meteringCallbackStruct,
                     UInt32(MemoryLayout<AURenderCallbackStruct>.size))

我不太确定如何解决这个问题。

除非我以某种方式将它们传回混音器单元，否则这个回调 "eat" 样本不会吗？

Answer 1

您不应该在 Swift 中执行回调。渲染线程处理只能在 C/C++.

中完成

您可以使用 render notify:

AudioUnitAddRenderNotify(mixer, my_C_callback, nil) //my_C_callback should not reference Swift objects, or be a Swift callback.

它使用与渲染回调相同的函数签名。它被称为预渲染和 post 渲染，你想处理 post 渲染。您可以从 ioActionFlags 获得此信息。

int isPostRender = ioActionFlags & kAudioUnitRenderAction_PostRender;

但是，由于您使用的是多通道混音器，输入电平监控是内置的，因此您不需要回调。

你先这样启用它。

//AudioUnit mixer; kAudioUnitSubType_MultiChannelMixer 

//Call Before AudioUnitInitialize()
UInt32 meteringMode = 1;
AudioUnitSetProperty(mixer, kAudioUnitProperty_MeteringMode, kAudioUnitScope_Input, 0, &meteringMode, sizeof(meteringMode));

然后在加工过程中可以通过读取参数得到等级。

int channel = 0;

AudioUnitParameterValue averageDecibles;
AudioUnitGetParameter(mixer, kMultiChannelMixerParam_PreAveragePower, kAudioUnitScope_Input, channel, &averageDecibles);

AudioUnitParameterValue peakHoldDecibles;
AudioUnitGetParameter(mixer, kMultiChannelMixerParam_PrePeakHoldLevel, kAudioUnitScope_Input, channel, &peakHoldDecibles);

Swift:

var meteringMode: UInt32 = 1;
let propSize = UInt32(MemoryLayout<UInt32>.size)
AudioUnitSetProperty(mixer, kAudioUnitProperty_MeteringMode, kAudioUnitScope_Input, 0, &meteringMode, propSize);

var averageDecibles: AudioUnitParameterValue = 0
AudioUnitGetParameter(mixer, kMultiChannelMixerParam_PreAveragePower, kAudioUnitScope_Input, channel, &averageDecibles);

var peakHoldDecibles: AudioUnitParameterValue = 0
AudioUnitGetParameter(mixer, kMultiChannelMixerParam_PrePeakHoldLevel, kAudioUnitScope_Input, channel, &peakHoldDecibles);

多个文件播放器上的 Core Audio 声音计量

Core Audio sound metering on multiple file players

swift

swift3

callback

core-audio

audiounit