使用 Python 进行稳定可靠的文件操作

文宇肃然

于 2014-05-13 15:52:34 发布

阅读量901

点赞数

CC 4.0 BY-SA版权

分类专栏： python快速学习实战应用系列课程

本文链接：https://blog.youkuaiyun.com/wenyusuran/article/details/25717213

python快速学习实战应用系列课程专栏收录该内容

139 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

本文讨论了在Python中进行文件操作时的原子性、一致性和持久性问题，包括不同更新模式的优缺点。文章提出了四种文件更新模式：截断-写、写-替换、追加和追加-校验和。对于原子性，文章指出写-替换模式由于os.rename()的原子性而具有较高的可靠性；而持久性则需要在写操作后调用os.fsync()或os.fdatasync()来确保数据写入非易失性存储。文章还强调了在并发环境下使用锁来保证隔离性的重要性，并讨论了如何通过追加校验和来处理追加模式下的不完整记录问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

#coding:utf--8
#author:SU
#date:2014-5-22 10:36:47

# 问题的提出：对文件中数据进行操作，然后将结果保存到文件中
# 1、with open(filename) as f:
#2、input = f.read()
#3、output = do_something(input)
#4、with open(filename, 'w') as f:
#5、f.write(output)

#失效模式的例子：
#1、失控的服务器进程溢出大量日志，磁盘被填满。write()在截断文件之后抛出异常，文件将会变成空的。
#2、应用的几个实例并行执行。在各个实例结束之后，因为混合了多个实例的输出，文件内容最终变成了天书。
#3、在完成了写操作之后，应用会触发一些后续操作。几秒钟后断电。在我们重启了服务器之后，我们再一次看到了旧的文件内容。已经传递给其它应用的数据与我们在文件中看到的不再一致。

'''
1、原子性(Atomicity)要求这个事务要么完全成功，要么完全失败。在上面的实例中，磁盘满了可能导致部分内容写入文件。另外，如果正当在写入内容时其它程序又在读取文件，它们可能获得是部分完成的版本࿰