python3读取大文件的行数的正确姿势

zhang_shuaixiang

于 2017-10-29 12:04:33 发布

阅读量7.3k

点赞数 7

分类专栏： python

本文链接：https://blog.youkuaiyun.com/u012762054/article/details/78384294

版权

python 专栏收录该内容

50 篇文章

订阅专栏

本文介绍了一种有效的方法来读取大文件并计算其行数，此方法通过逐块读取文件内容并计数换行符来实现，能够准确获取非空行的有效数量。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

试过几个读取大文件的行号的方法，但最终觉得这个方法不错

count = 0
fp = open(filename, "r", encoding='utf-8')
while 1:
    buffer = fp.read(8*1024*1024)
    if not buffer:
        break
    count += buffer.count('\n')
print(count)
print('over')
fp.close()

读取到的是实际有效的行数，空行不计。