cry*_*Kay 6 python parallel-processing concurrency multithreading signal-processing
我正在用 python 开发信号处理应用程序。我想在python中使用多个线程调用同一个函数,以实现并发执行,可以吗?如果是这样怎么办?
长话短说:不,因为全局解释器锁。
但是您可能需要考虑使用进程而不是线程,这似乎是您的应用程序的真正需求(据您的解释可以理解),因为您似乎不需要使用共享内存空间。
一个(非常)简单的例子:
import multiprocessing
def worker(num):
""" Worker procedure
"""
print('Worker:', str(num))
# Mind the "if" instruction!
if __name__ == '__main__':
jobs = [] # list of jobs
jobs_num = 5 # number of workers
for i in range(jobs_num):
# Declare a new process and pass arguments to it
p1 = multiprocessing.Process(target=worker, args=(i,))
jobs.append(p1)
# Declare a new process and pass arguments to it
p2 = multiprocessing.Process(target=worker, args=(i+10,))
jobs.append(p2)
p1.start() # starting workers
p2.start() # starting workers
Run Code Online (Sandbox Code Playgroud)
此示例将为您提供以下输出:
$ python multiprocessing_example.py
Worker: 0
Worker: 10
Worker: 1
Worker: 11
Worker: 2
Worker: 12
Worker: 3
Worker: 13
Worker: 4
Worker: 14
Run Code Online (Sandbox Code Playgroud)
为了充分利用多个进程,我建议您了解一些有关模块的文档、GIL、线程和进程之间的差异,特别是它如何加速或限制您想要做的事情以及如何做。
例如,如果您的瓶颈是 I/O,那么采用多处理不会对您有帮助,但如果您的处理受到 CPU 的限制,则会有所帮助。
归档时间: |
|
查看次数: |
17237 次 |
最近记录: |