当我没有文件标识符时如何在 python 中关闭文件

Question

我发现自己无法在 Python 中打开新文件。当我检查时，ls -l /proc/PID/fd我看到为 Python 进程打开了大量文件。我正在使用的模块显然是打开了很多文件而不是关闭它们。

我原以为我可以通过删除与打开文件的模块关联的对象来关闭文件，但什么也没发生。

我还期待在垃圾收集中的某处看到文件对象，但我没有看到任何类似于打开文件的内容：

for obj in gc.get_objects():
    if hasattr(obj, 'read'):
        print(obj)

当我退出 Python 时，这些文件消失了。

Answer 1

问题很可能是这些文件描述符在没有与 Python 对象关联的情况下泄漏。Python 无法查看与 Python 对象无关的实际文件描述符（操作系统资源）。如果它们与 Python 对象相关联，Python 会在它们被垃圾回收时关闭它们。或者，第三方库自己跟踪文件描述符。

您可以使用os.close普通整数来关闭关联的文件描述符。如果您知道要保持打开哪些文件描述符（通常是 stdin/stdout/stderr，它们是 0、1 和 2，也许还有其他一些），您可以关闭从 0 到 65535 的所有其他整数，或者只是关闭那些在/proc/<pid>/fd：

import os

KEEP_FD = set([0, 1, 2])

for fd in os.listdir(os.path.join("/proc", str(os.getpid()), "fd")):
    if int(fd) not in KEEP_FD:
        try:
            os.close(int(fd))
        except OSError:
            pass

不过，这是一个非常邪恶的黑客攻击。更好的解决方案是修复第三方库。