Python 词频及常用词频度统计

最新推荐文章于 2024-06-08 10:55:02 发布

zhangyun75

最新推荐文章于 2024-06-08 10:55:02 发布

阅读量1.2k

点赞数

CC 4.0 BY-SA版权

分类专栏： NLP 文章标签： Python 词频频度统计 NLP

本文链接：https://blog.youkuaiyun.com/zhangyun75/article/details/80831515

NLP 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一个使用Python进行词频统计的方法。通过加载文本文件并利用jieba分词库进行中文分词，接着采用collections模块中的Counter类来统计词频，并最终输出了文本中出现频率最高的五个词汇。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

借助collections模块实现词频及常用词频度统计。

#!/usr/bin/python3
# _*_ coding:utf-8 _*_
 
import sys
import jieba
from collections import Counter
 
with open("./downfile/file7.txt", 'r') as f:
	text = f.read()
f.close()
print(text)
 
txt = jieba.lcut(text)
c = Counter()
for w in txt:
	if len(w) > 1 and w != '\r\n':
		c[w] = c[w] + 1
 
 
for key in c:
	print(key, c[key])
 
print('常用词频度统计结果：')
for (k, v) in c.most_common(5):
	print(k, v)