Jieba

@东辰

于 2018-09-05 17:45:05 发布

阅读量442

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Self-taught Python

本文链接：https://blog.youkuaiyun.com/DemoD_/article/details/82427929

Self-taught Python 专栏收录该内容

13 篇文章

订阅专栏

本文介绍如何利用Python中的Jieba库对《三国演义》文本进行分词处理，并统计出现频率较高的词汇。通过加载文本文件，使用jieba.lcut方法将文本切分为词语列表，接着统计每个词的出现次数并按出现频率从高到低排序。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Jieba库：主要是将字符串分割成单词

import jieba
txt = open("threekingdoms.txt", "r", encoding="utf-8").read()
# jieba.lcut(str)  将str分成片，不重复
words = jieba.lcut(txt)
counts = {}
for word in words:
	if len(word) ==1:
		continue
	else:
		# 如果word 不存在，则value默认为0
		counts[word] = counts.get(word, 0)+1
# counts.items()是所有的键值对
items = list(counts.items())
items.sort(key=lambda x: x[1],reverse=True)
for i in range(15):
	word, count = items[i]
	print("{0:<10}{1:>5}".format(word, count))