仅在机器空闲时运行cron作业(linux)

Question

如何在CPU空闲> 50%时运行cron作业(bash脚本)？

我可以从TOP获得cpu空闲

top -b -d 00.10 -n 3 |grep ^Cpu
Cpu(s): 0.3%us, 0.3%sy, 0.0%ni, 99.3%id, 0.0%wa, 0.0%hi, 0.0%si, 0.0%st

我目前的设置是:

crontab
0,15,30,45 * * * * /usr/bin/php /home/user/batchprocess.php
# I could use a bash script here to call PHP, if it is a good solution.

我有PHP脚本检查CPU空闲:

batchprocess.php
proc_nice(10);
// wait for CPU idle
do{
    $cpu_stat = exec('top -b -d 00.10 -n 3 |grep ^Cpu');    
    $tmp = stristr($cpu_stat,'%id',TRUE);
    $cpuidle = trim(substr($tmp,strrpos($tmp,',')+1));
}while($cpuidle<$min_cpuidle);
// do actual processing here

我当前的方法的问题是无论CPU利用率如何都启动程序.运行TOP的while循环感觉效率不高.我希望它只在CPU空闲> 50时启动

一些额外的信息:

• Centos 6.2,PHP5.3

• 我有一些永不关闭的EC2实例,所以我想在闲置时利用它们的处理能力.但永远不要大量加载服务器.(冗余数据库实例,开发实例,NAT实例)

• 我知道EC2自动缩放,现场实例.只是想使用额外的容量.

• 后台作业是图像压缩(CPU密集型,I/O或网络不多).

任何建议都是受欢迎的.提前致谢!

---

根据下面的输入,我意识到"好"是我个案中更好的解决方案.我应该重新调整我的目标,以尽量减少对服务器的影响,而不是跟踪CPU利用率.

所以新的设置是:

crontab
0,15,30,45 * * * * nice -20 /usr/bin/php /home/user/batchprocess.php

和PHP脚本:

batchprocess.php
if ($cpuidle < 50) 
    exit(0);
// do actual processing here

我会测试它并回复我的发现.

---

报告回来:我把这段代码放到DEV/PRD上,效果很好.它没有解决TOCTOU的问题,但现在已经足够好了.

Answer 1

这是TOCTOU的典型案例- 您检查系统是否处于空闲状态并启动您的流程 - 但在检查之后,在流程开始之前或之前,还有其他因素导致系统中的另一个流程启动,您仍然会加载系统超过必要的.

执行此操作的"正确"方法是使用该nice命令为您的进程提供低优先级.顺便说一句,你检查cpu使用的循环将使用100%cpu,所以它可能无法工作,除非你第一次检查它是空闲的.

你已经有了一个"proc_nice(10)",所以应该做这个工作.我没有看到花费精力来确定系统是否繁忙.

如果您在代码中的适当位置注意到,您可以执行以下操作:

 if (check_cpu_usage() > 50%) sleep(1second); 

但是我不确定这是否有用 - 如果系统繁忙,"好"的进程将不会获得太多的CPU时间,因此不会与其他以更高优先级运行的进程竞争.