Python多个用户同时附加到同一文件

Question

我正在研究一个可以通过网络访问的python脚本,因此会有多个用户试图同时附加到同一个文件.我担心这可能导致竞争条件,如果多个用户同时写入同一文件,它可能会损坏文件.

例如:

#!/usr/bin/env python

g = open("/somepath/somefile.txt", "a")
new_entry = "foobar"
g.write(new_entry)
g.close

我是否必须使用锁定文件,因为此操作看起来很危险.

Answer 1

您可以使用文件锁定:

import fcntl
new_entry = "foobar"
with open("/somepath/somefile.txt", "a") as g:
    fcntl.flock(g, fcntl.LOCK_EX)
    g.write(new_entry)
    fcntl.flock(g, fcntl.LOCK_UN)

请注意,在某些系统上,则锁定不需要,如果你只写小的缓冲区,因为附加在这些系统上是原子.

Answer 2

如果您在 Linux 上执行此操作，并且缓存大小小于 4KB，则写入操作是原子的，您应该没问题。

更多内容请阅读： Unix 中的文件追加是原子的吗？

Answer 3

您没有说明您使用的平台，但这里有一个您可以使用的跨平台模块： Python 中的文件锁定