在应该连续的进程中减少“中断”或暂停的 Python 方法,特别是音频?

Mic*_*orn 5 python audio librosa

我正在尝试在歌曲播放时编辑歌曲。到目前为止,我已经成功地创建了一个几乎可以满足我想要的流程。我将分享它是如何工作的以及将我带到这里寻求建议的问题。

我将一首歌曲作为数组 y 和采样率 sr。然后,每 5 秒提供一次新 ping 的数据馈送(在下面表示为参数 = [])。我在播放过程中使用该 ping 来编辑我的歌曲。然后,每 5 秒重复一次。

import librosa as lr
y, sr = lr.load(song)
arguments=[] # Populated from external source.
for arg in arguments:
    end += some_interval
    if end > y.size: ... # breaks out of the loop if the song is over.
    x, sr = song_edit(y[front:end],sr, arg)
    sd.play(x, sr, blocking=True)
    front=end
Run Code Online (Sandbox Code Playgroud)

问题:

  • 在一个 5 秒的音乐剪辑和下一个剪辑结束时会出现轻微的延迟。在音乐中,这从根本上是有问题的。

我考虑过的解决方案:

  • 由于 sd.play 中的 blocks=True,代码在整个剪辑播放时停止。因此,延迟必须是可解的。
  • 我考虑过线程或多处理。这是最好的方法吗?我的理解是线程不会起作用,因为我的论点不是预先确定的。
  • 我错过了什么?

编辑: 我测试了这个:

#x, sr = song_edit(y[front:end],sr, arg)
sd.play(y[front:end], sr, blocking=True)
Run Code Online (Sandbox Code Playgroud)

延迟还在!因此,延迟一定是循环的迭代或sd.play中固有的延迟造成的。

Mic*_*orn 0

更接近答案:典型的播放(歌曲)功能,如 librosa、pyaudio、sounddevice 等,主要是为 jupyter 笔记本和简单的实现而设计的。(忘记出处)。我提到的每个库(我确定 pyaudio 和 sd)都有一个 Stream 类,它比简单的播放函数更适合分析。

PyAudio:Stream 对象的一个​​可选参数是回调。当流恢复时,流循环通过回调函数,该函数向流提供数据。

    # define callback (2)
    def callback(in_data, frame_count, time_info, status):
        data = wf.readframes(frame_count)
        print('We Done it!')
        return (data, pyaudio.paContinue)


    # open stream using callback (3)
    stream = p.open(format=p.get_format_from_width(wf.getsampwidth()),
                    channels=wf.getnchannels(),
                    rate=wf.getframerate(),
                    output=True,
                    stream_callback=callback)
Run Code Online (Sandbox Code Playgroud)

此代码来自 PyAudio 文档,但我做了一个小更改:回调函数中的 print 语句。该代码的输出(以及一些其他行,例如实例化对象)将是音频输出+“我们完成了!” 每秒打印多次。

我仍然不完全理解回调是如何工作的,但这有助于推动我在旅程中前进。