python 将分词结果写入txt文件

weixin_30551947

于 2019-05-07 17:02:00 发布

阅读量3.1k

点赞数

CC 4.0 BY-SA版权

文章标签： python

原文链接：http://www.cnblogs.com/baobaotql/p/10826632.html

本文介绍了如何使用Python的jieba库进行分词，并将分词结果写入TXT文件。在过程中遇到了迭代器不能直接写入文件、字符串转换问题以及乱码问题，通过将分词结果转为list，去除特殊字符，并在写入时指定utf-8编码解决了问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

首先我运用的分词工具是结巴分词 import jieba 然后调用jieba.cut( ) 但是jieba.cut 返回的是一个generator的迭代器

他可以显示分词结果但是无法将结果写入txt 各种报错。类似于a bytes-like object is required, not 'generator'

然后我将结果进行了Str( )处理还是报类似的错误只不过变成了not ' generator'

然后经过思考我将结果作list( )处理然后对生成的list进行处理，去' [ ' ，' ] '和' ，'

def text_save(filename,data):
    file = open(filename,'a+')
    for i in range(len(data)):
        s = str(data[i]).replace('[','

200万优质内容无限畅学