systemd下破折号最大可变长度

Moo*_*eep 5 dash shell-script limit systemd

我有一个 shell 脚本,它使用单个变量作为关联数组(KEY=VALUE每行一个)。

在脚本的整个执行过程中,变量被操纵以添加、删除或修改条目:

附加:

VARIABLE="$(printf "%s\n%s" "$VARIABLE" "KEY=VALUE")"
Run Code Online (Sandbox Code Playgroud)

调整:

VARIABLE="$(printf "%s\n" "$VARIABLE" | sed -E "s,^(KEY=).*$,\1VALUE,")"
Run Code Online (Sandbox Code Playgroud)

消除:

VARIABLE="$(printf "%s\n" "$VARIABLE" | grep -E -v "^KEY=.*$")"
Run Code Online (Sandbox Code Playgroud)

在终端中执行时(或作为sysv下的旧机器上的服务通过 init 脚本),该脚本运行良好,但是当作为systemd下的服务运行时,一段时间后,脚本开始在日志 :

sh: printf: I/O error

经过大量的反复试验,我无法确定脚本中的哪些命令产生了这些错误,但我注意到当变量的长度达到 8000 字节时它们开始出现(我猜是 8192,但我由于附加了整行,因此无法准确指出它)。

我很确定变量长度是问题所在,因为我实现了一个例程,当变量长度接近 8192 字节时,它会修剪数组中最旧的条目,现在脚本确实运行systemd了很长时间而没有错误;但这当然不理想,因为会丢失一些信息。

我在网上搜索了有关 shell 脚本中最大可变长度的信息,但没有找到任何有用的信息:

  • dash 手册页没有说明最大可变长度。

  • GNU sed 文档说:

对于那些想要编写可移植sed脚本的人,请注意某些实现已将行长度(对于模式和保持空间)限制为不超过 4000 字节。的POSIX标准规定符合sed的实施方式应支持至少8192米字节行的长度。GNU sed没有内置的行长限制;只要它可以malloc()更多(虚拟)内存,您就可以随心所欲地馈送或构造行。

...但这适用于行长,而不是整个文本长度(单行不超过 80 个字符)

无论如何,由于错误仅在脚本运行时出现systemd,我试图增加LimitMSGQUEUE和/或LimitSTACK在单元文件中,但无济于事(这是一个盲目的猜测,因为我不完全理解消息队列或进程的概念堆栈,但显示的数字systemctl show看起来像 8 KB 左右)。关于内存 ( LimitRSS, LimitAS, LimitMEMLOCK) 的所有其他限制似乎都足够高(超过 8192 字节),所以我不知道接下来要做什么。

systemd当变量长度超过 8 KB 时,我该怎么做才能让这个脚本在没有错误的情况下运行?

agc*_*agc 0

与其说是答案,不如说是诊断……

在我的系统上,运行dash v0.5.8-2.10,变量长度可能非常大,至少2^30个字符。演示,通过将变量的长度加倍${x},直到其字符长度超过可用内存的${#x}25% (由ad hoc furp函数检查):

首次启动dash

dash
Run Code Online (Sandbox Code Playgroud)

然后,(在dash)中运行以下代码:

furp() { free | { read z; read a b c d; echo $((100*$c/$b)) ; } }
x=1
while [ `furp` -lt 25 ] ; do 
    x="${x}${x}"; echo ${#x}
done | tail -1
Run Code Online (Sandbox Code Playgroud)

输出(在我的系统上,可能会根据可用内存而有所不同):

1073741824
Run Code Online (Sandbox Code Playgroud)

尝试将类似上面的代码放入脚本中,然后在相同的systemd环境下运行它并检查输出。