Python之批量创建文件

最新推荐文章于 2023-03-20 09:56:47 发布

原创最新推荐文章于 2023-03-20 09:56:47 发布 · 646 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#python #文件

python 专栏收录该内容

5 篇文章

订阅专栏

本文介绍了一种使用Python批量创建文件的方法，特别适用于大数据集的处理。通过读取一个大型文本文件，每读取一千行就生成一个新的文件，有效管理了文件大小，提高了处理效率。

每截取一千行生成一个文件

index = 0
count = 0
fileIn = open("D:/xiaoaojianghu_jinyong/%d.txt" % index, "w",encoding='utf-8' )
with open("D:/xiaoaojianghu_jinyong.txt","r",encoding='utf-8') as fileOut:
    for line in fileOut:
        count+=1
        fileIn.write(line)

        if count == 1000:
            fileIn.close()
            count = 0
            index+=1
            fileIn = open("D:/xiaoaojianghu_jinyong/%d.txt" % index, "w",encoding='utf8')
fileIn.close()