我有一个脚本,我总是希望并行运行“x”个实例。
代码看起来像这样:
for A in
do
for B in
do
(script1.sh $A $B;script2.sh $A $B) &
done #B
done #A
Run Code Online (Sandbox Code Playgroud)
脚本本身运行数据库查询,因此它将受益于并行运行。问题是
1)“等待”不起作用(因为它完成了所有后台作业并开始了新作业(即使我包含一个线程计数器),这浪费了大量时间。
2)我不知道如何并行做到这一点。我只找到了多次运行相同脚本但没有使用不同参数的示例。
3)替代解决方案是:
for A in
do
for B in
do
while threadcount>X
do
sleep 60
done
(script1.sh $A $B;script2.sh $A $B) &
done #B
done #A
Run Code Online (Sandbox Code Playgroud)
但我并没有真正弄清楚如何使线程数可靠。
非常欢迎一些指向正确方向的提示。
我很想使用并行,但事情就像文档告诉我的那样不起作用。
我愿意
parallel echo ::: A B C ::: D E F
Run Code Online (Sandbox Code Playgroud)
(来自文档)它告诉我
parallel: Input is read from the terminal. Only experts do this on purpose. Press CTRL-D to exit. …Run Code Online (Sandbox Code Playgroud)