python read文件内容的iter方式

最新推荐文章于 2025-01-04 10:20:24 发布

weixin_30480651

最新推荐文章于 2025-01-04 10:20:24 发布

阅读量435

点赞数

CC 4.0 BY-SA版权

文章标签： python

原文链接：http://www.cnblogs.com/bierxiaobia/p/6434555.html

本文介绍了一种遍历文件并计算其MD5值的方法。通过使用迭代器和哈希库，该方法能够有效地处理大型文件，避免一次性加载整个文件到内存中。此技术适用于验证文件完整性和一致性。

遍历file的方式

iter(lambda: f.read(4096), "")
等价与
while True:
    data = f.read(4096)
    if not data:
        break
    hash_md5.updata(data)

# 生成md5
def get_file_md5(fname):
    hash_md5 = hashlib.md5()
    with open(fname, "rb") as f:
        print type(f)
        for chunk in iter(lambda: f.read(4096), ""):
            hash_md5.update(chunk)

    return base64.b64encode(hash_md5.digest())