将stdout的COPY重定向到bash脚本本身的日志文件

Question

我知道如何将stdout重定向到文件:

exec > foo.log
echo test

这会将'test'放入foo.log文件中.

现在我想将输出重定向到日志文件并将其保存在stdout上

即它可以从脚本外部轻松完成:

script | tee foo.log

但我想在脚本本身内声明它

我试过了

exec | tee foo.log

但它不起作用.

Answer 1

#!/usr/bin/env bash

# Redirect stdout ( > ) into a named pipe ( >() ) running "tee"
exec > >(tee -i logfile.txt)

# Without this, only stdout would be captured - i.e. your
# log file would not contain any error messages.
# SEE (and upvote) the answer by Adam Spiers, which keeps STDERR
# as a separate stream - I did not want to steal from him by simply
# adding his answer to mine.
exec 2>&1

echo "foo"
echo "bar" >&2

请注意,这bash不是sh.如果使用调用脚本sh myscript.sh,则会出现错误syntax error near unexpected token '>'.

如果您正在使用信号陷阱,则可能需要使用该tee -i选项以避免在发生信号时中断输出.(感谢JamesThomasMoon1979的评论.)

根据是否写入管道或终端(ls例如,使用颜色和列化输出)来更改输出的工具将检测上述构造,意​​味着它们输出到管道.

有一些选项可以强制执行着色/列化(例如ls -C --color=always).请注意,这将导致颜色代码也被写入日志文件,从而降低了可读性.

Answer 2

接受的答案不会将STDERR保留为单独的文件描述符.这意味着

./script.sh >/dev/null

不会输出bar到终端,只输出到日志文件,和

./script.sh 2>/dev/null

将输出两个foo和bar终端.显然,这不是普通用户可能期望的行为.这可以通过使用两个单独的tee进程来修复,这两个进程都附加到同一个日志文件:

#!/bin/bash

# See (and upvote) the comment by JamesThomasMoon1979 
# explaining the use of the -i option to tee.
exec >  >(tee -ia foo.log)
exec 2> >(tee -ia foo.log >&2)

echo "foo"
echo "bar" >&2

(请注意,上面的内容最初并不会截断日志文件 - 如果您想要添加该行为

>foo.log

到脚本的顶部.)

所述的POSIX.1-2008规范tee(1)要求输出是无缓冲的,即偶数行缓冲没有,所以在这种情况下可能的是,STDOUT和STDERR可以在同一行上的结束foo.log; 然而,这也可能发生在终端上,所以日志文件将是一个什么样的忠实反映可以看出在终端上,如果不是它的精确镜像.如果您希望STDOUT线与STDERR线完全分离,请考虑使用两个日志文件,每行可能带有日期戳前缀,以便稍后按时间顺序重新组装.

Answer 3

busybox,macOS bash和非bash shell的解决方案

接受的答案肯定是bash的最佳选择.我在没有访问bash的Busybox环境中工作,并且它不理解exec > >(tee log.txt)语法.它也无法exec >$PIPE正常工作,尝试创建一个与命名管道同名的普通文件,该文件失败并挂起.

希望这对没有bash的其他人有用.

此外,对于使用命名管道的任何人来说,它是安全的rm $PIPE,因为它取消了管道与VFS的链接,但使用它的进程仍然保持引用计数,直到它们完成.

注意$*的使用不一定安全.

#!/bin/sh

if [ "$SELF_LOGGING" != "1" ]
then
    # The parent process will enter this branch and set up logging

    # Create a named piped for logging the child's output
    PIPE=tmp.fifo
    mkfifo $PIPE

    # Launch the child process with stdout redirected to the named pipe
    SELF_LOGGING=1 sh $0 $* >$PIPE &

    # Save PID of child process
    PID=$!

    # Launch tee in a separate process
    tee logfile <$PIPE &

    # Unlink $PIPE because the parent process no longer needs it
    rm $PIPE    

    # Wait for child process, which is running the rest of this script
    wait $PID

    # Return the error code from the child process
    exit $?
fi

# The rest of the script goes here

Answer 4

在脚本文件中,将所有命令放在括号内,如下所示:

(
echo start
ls -l
echo end
) | tee foo.log

Answer 5

轻松地将bash脚本日志记录到syslog中.脚本输出既可以/var/log/syslog通过stderr 也可以通过stderr获得.syslog将添加有用的元数据,包括时间戳.

在顶部添加此行:

exec &> >(logger -t myscript -s)

或者,将日志发送到单独的文件:

exec &> >(ts |tee -a /tmp/myscript.output >&2 )

这需要moreutils(对于ts添加时间戳的命令).

Answer 6

使用接受的答案我的脚本保持异常提前返回(在'exec >>(tee ...)之后'),让我的脚本的其余部分在后台运行.由于我无法以我的方式使用该解决方案,因此我找到了另一个解决方案/解决问题:

# Logging setup
logfile=mylogfile
mkfifo ${logfile}.pipe
tee < ${logfile}.pipe $logfile &
exec &> ${logfile}.pipe
rm ${logfile}.pipe

# Rest of my script

这使得脚本的输出从进程,通过管道进入"tee"的子后台进程,该进程将所有内容记录到磁盘和脚本的原始stdout.

请注意,'exec&>'重定向stdout和stderr,如果我们愿意,我们可以单独重定向它们,或者如果我们只想要stdout则更改为'exec>'.

即使您在脚本开头将管道从文件系统中删除,它也将继续运行,直到进程完成.我们只是不能使用rm-line之后的文件名来引用它.