使用子进程模块在Python中执行管道命令的任何方法,而不使用shell = True？

Question

我想从Python运行一个管道命令行linux/bash命令,它首先记录文件,然后拆分tar文件.命令在bash中看起来像这样:

> tar -cvf - path_to_archive/* | split -b 20m -d -a 5 - "archive.tar.split"

我知道我可以使用子进程执行它,通过设置shell = True,并将整个命令作为字符串提交,如下所示:

import subprocess    

subprocess.call("tar -cvf - path_to_archive/* | split -b 20m -d -a 5 - 'archive.tar.split'", shell=True)

...但出于安全原因,我想找到一种方法来跳过"shell = True"部分(它采用字符串列表而不是完整的命令行字符串,并且无法正确处理管道char).在Python中有没有解决方案？即,是否有可能以某种方式设置链接管道,或其他一些解决方案？

Answer 1

如果要避免使用shell = True,可以手动使用子进程管道.

from subprocess import Popen, PIPE
p1 = Popen(["tar", "-cvf", "-", "path_to_archive"], stdout=PIPE)
p2 = Popen(["split", "-b", "20m", "-d", "-a", "5", "-", "'archive.tar.split'"], stdin=p1.stdout, stdout=PIPE)
output = p2.communicate()[0]

请注意,如果不使用shell,则无法访问*等泛化字符的扩展.相反,您可以使用该glob模块.

Answer 2

tar 可以自行分裂：

tar -L 1000000 -F name-script.sh cf split.tar largefile1 largefile2 ...

名称脚本.sh

#!/bin/bash
echo "${TAR_ARCHIVE/_part*.tar/}"_part"${TAR_VOLUME}".tar >&"${TAR_FD}"

重新组装

tar -M -F name-script.sh cf split.tar

将其添加到您的 python 程序中。