iOS录制音频和绘制波形,如语音备忘录

Question

我会在一个问题中冒出过于含糊或过多问题的风险,但我真的只是在寻找正确方向的一点.

在我的应用程序中,我想录制音频,在录制时显示波形,并滚动波形以在指定时间内录制和播放.例如,如果我有3分钟的音频,我应该能够回滚到2:00并从那里开始录制以修复错误.

在语音备忘录中,这是即时完成的,没有任何延迟或加载时间.如果有人有线索的话,我正在试图弄清楚这是怎么做到的.

我尝试过的:

EZAudio - 这个图书馆很棒,但不能做我想要的.您无法滚动波形.它会在开头删除波形数据,并在达到一定长度后开始将其附加到末尾.

SCWaveformView - 这个波形很好,但它使用图像.一旦波形太长,将其置于滚动视图中会导致滚动抖动.此外,您无法在录制时构建波形.

至于追加,我已经使用过这种方法:https://stackoverflow.com/a/11520553/1391672 但是,即使将两个非常短的音频片段附加在一起(根据我的经验),也会有很长的处理时间.

语音备忘录如何做它的功能？你认为波形是用OpenGL还是CoreGraphics绘制的？他们使用的是Core Audio还是AVAudioRecorder？有没有人建造这样的东西可以指向我正确的方向？

Answer 1

放大时，滚动视图只需要绘制可见波形的一小部分。缩小时，图形视图可能仅绘制音频缓冲区的每第 N 个点，或者在渲染之前对数据使用某些其他 DSP 下采样算法。这可能必须在 UIScrollView 或类似的自定义控制器中使用您自己的自定义绘图或图形渲染代码来完成。录制期间和录制之后的波形渲染代码不必相同。

您使用的记录 API 和绘图 API 可以完全独立，并且几乎可以是任何东西，从 OpenGL 到 Metal 到 Core Graphics（在更新更快的设备上）。在音频端，Core Audio 将有助于提供最低的延迟，但音频队列和 AVAudioEngine 也可能适合。