小编Chr*_*ris的帖子

如何并行运行脚本的 x 个实例?

我有一个脚本,我总是希望并行运行“x”个实例。

代码看起来像这样:

for A in 
do
  for B in
  do
    (script1.sh $A $B;script2.sh $A $B) &
  done #B
done #A
Run Code Online (Sandbox Code Playgroud)

脚本本身运行数据库查询,因此它将受益于并行运行。问题是

1)“等待”不起作用(因为它完成了所有后台作业并开始了新作业(即使我包含一个线程计数器),这浪费了大量时间。

2)我不知道如何并行做到这一点。我只找到了多次运行相同脚本但没有使用不同参数的示例。

3)替代解决方案是:

for A in 
do
  for B in
  do
    while threadcount>X 
    do
      sleep 60
    done
    (script1.sh $A $B;script2.sh $A $B) &
  done #B
done #A
Run Code Online (Sandbox Code Playgroud)

但我并没有真正弄清楚如何使线程数可靠。

非常欢迎一些指向正确方向的提示。


我很想使用并行,但事情就像文档告诉我的那样不起作用。

我愿意

parallel echo ::: A B C ::: D E F
Run Code Online (Sandbox Code Playgroud)

(来自文档)它告诉我

parallel: Input is read from the terminal. Only experts do this on purpose. Press CTRL-D to exit. …
Run Code Online (Sandbox Code Playgroud)

bash parallelism gnu-parallel

6
推荐指数
1
解决办法
4828
查看次数

标签 统计

bash ×1

gnu-parallel ×1

parallelism ×1