AVAudioEngine同步用于MIDI播放和录制

Question

问题1 我的第一个问题是将an AVAudioPlayerNode和an AVAudioSequencer用于MIDI 时的播放同步。基本上，我试图通过MIDI播放某些东西，但是它们需要完全同步。

我知道AVAudioPlayerNodes 有同步方法，但是音序器似乎没有这样的东西。

目前，我已经尝试在单独的线程上使用CAMediaTime() + delay和usleep，但是它们似乎不能很好地工作。

问题2我正在使用上的水龙头engine.inputNode来获取录音，与音乐播放分开。但是，录音似乎开始得较早。当我将记录的数据与原始播放进行比较时，相差大约300毫秒。我可以在300毫秒后开始记录，但是即使那样，也不能保证精确的同步，并且可能与机器有关。

所以我的问题是，什么是确保在播放开始时准确开始录制的好方法？

Answer 1

为了同步音频io，通常最好创建一个参考时间，然后将该时间用于所有与时序相关的计算。

AVAudioPlayerNode.play（at :)是播放器所需的。对于分接头，您需要使用闭包中提供的时间手动过滤（部分）缓冲区。不幸的是，AVAudioSequencer没有在特定时间启动的功能，但是您可以使用hostTime（forBeats）使用已经播放的音序器获得与节拍相关的参考时间。如果我没记错的话，您不能将音序器设置为负位置，因此这不是理想的选择。

这是一个骇人的解决方法，应该会产生非常准确的结果：

必须先启动AVAudioSequencer，然后才能获取参考时间，将所有Midi数据偏移1，启动音序器，然后立即获取与节拍1相关的参考时间，然后将播放器的启动与此时间同步，并使用它过滤掉水龙头捕获的有害音频。

func syncStart() throws {
    //setup
    sequencer.currentPositionInBeats = 0
    player.scheduleFile(myFile, at: nil)
    player.prepare(withFrameCount: 4096)

    // Start and get reference time of beat 1
    try sequencer.start()
    // Wait until first render cycle completes or hostTime(forBeats) will err - AVAudioSequencer is fragile :/
    while (self.sequencer.currentPositionInBeats <= 0) { usleep(UInt32(0.001 * 1000000.0)) }
    var nsError: NSError?
    let hostTime = sequencer.hostTime(forBeats: 1, error: &nsError)
    let referenceTime = AVAudioTime(hostTime: hostTime)

    // AVAudioPlayer is great for this.
    player.play(at: referenceTime)

    // This just rejects buffers that come too soon. To do this right you need to record partial buffers.
    engine.inputNode.installTap(onBus: 0, bufferSize: 1024, format: nil) { (buffer, audioTime) in
        guard audioTime.hostTime >= referenceTime.hostTime else { return }
        self.recordBuffer(buffer: buffer)
    }
}