Moo*_*eep 5 dash shell-script limit systemd
我有一个 shell 脚本,它使用单个变量作为关联数组(KEY=VALUE每行一个)。
在脚本的整个执行过程中,变量被操纵以添加、删除或修改条目:
附加:
VARIABLE="$(printf "%s\n%s" "$VARIABLE" "KEY=VALUE")"
Run Code Online (Sandbox Code Playgroud)
调整:
VARIABLE="$(printf "%s\n" "$VARIABLE" | sed -E "s,^(KEY=).*$,\1VALUE,")"
Run Code Online (Sandbox Code Playgroud)
消除:
VARIABLE="$(printf "%s\n" "$VARIABLE" | grep -E -v "^KEY=.*$")"
Run Code Online (Sandbox Code Playgroud)
在终端中执行时(或作为sysv下的旧机器上的服务通过 init 脚本),该脚本运行良好,但是当作为systemd下的服务运行时,一段时间后,脚本开始在日志 :
sh: printf: I/O error
经过大量的反复试验,我无法确定脚本中的哪些命令产生了这些错误,但我注意到当变量的长度达到 8000 字节时它们开始出现(我猜是 8192,但我由于附加了整行,因此无法准确指出它)。
我很确定变量长度是问题所在,因为我实现了一个例程,当变量长度接近 8192 字节时,它会修剪数组中最旧的条目,现在脚本确实运行systemd了很长时间而没有错误;但这当然不理想,因为会丢失一些信息。
我在网上搜索了有关 shell 脚本中最大可变长度的信息,但没有找到任何有用的信息:
dash 手册页没有说明最大可变长度。
对于那些想要编写可移植sed脚本的人,请注意某些实现已将行长度(对于模式和保持空间)限制为不超过 4000 字节。的POSIX标准规定符合sed的实施方式应支持至少8192米字节行的长度。GNU sed没有内置的行长限制;只要它可以malloc()更多(虚拟)内存,您就可以随心所欲地馈送或构造行。
...但这适用于行长,而不是整个文本长度(单行不超过 80 个字符)
无论如何,由于错误仅在脚本运行时出现systemd,我试图增加LimitMSGQUEUE和/或LimitSTACK在单元文件中,但无济于事(这是一个盲目的猜测,因为我不完全理解消息队列或进程的概念堆栈,但显示的数字systemctl show看起来像 8 KB 左右)。关于内存 ( LimitRSS, LimitAS, LimitMEMLOCK) 的所有其他限制似乎都足够高(超过 8192 字节),所以我不知道接下来要做什么。
systemd当变量长度超过 8 KB 时,我该怎么做才能让这个脚本在没有错误的情况下运行?
与其说是答案,不如说是诊断……
在我的系统上,运行dash v0.5.8-2.10,变量长度可能非常大,至少2^30个字符。演示,通过将变量的长度加倍${x},直到其字符长度超过可用内存的${#x}约25% (由ad hoc furp函数检查):
首次启动dash:
dash
Run Code Online (Sandbox Code Playgroud)
然后,(在dash)中运行以下代码:
furp() { free | { read z; read a b c d; echo $((100*$c/$b)) ; } }
x=1
while [ `furp` -lt 25 ] ; do
x="${x}${x}"; echo ${#x}
done | tail -1
Run Code Online (Sandbox Code Playgroud)
输出(在我的系统上,可能会根据可用内存而有所不同):
1073741824
Run Code Online (Sandbox Code Playgroud)
尝试将类似上面的代码放入脚本中,然后在相同的systemd环境下运行它并检查输出。
| 归档时间: |
|
| 查看次数: |
262 次 |
| 最近记录: |