用Python实现一个小说词频统计

本文介绍了一种使用Python和jieba库对中文小说进行词频统计的方法。通过读取《西游记》文本文件,提取名词并统计出现频率,最终将高频词汇写入新文件。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

      这个主要是通过调用jieba库去实现对小说不同词性的词进行一些统计,欢迎大家来了解,这个如果对你的学习有帮助的话,请给笔者留下一个赞和收藏鼓励下哈

import jieba.posseg as pseg

filename = "西游记.txt"
with open(filename, encoding='utf-8') as fin:
    text = fin.read()

words = pseg.cut(text)

dic = {}
for word,flag in words:
    if flag == 'n':
       if word not in dic:
        dic[word] = 1
       else:
        dic[word] += 1

list_ = list(dic.items())
list_.sort(key=lambda x: x[1], reverse=True)


with open('西游记高频词统计.txt', 'w', encoding='utf-8') as fout:
   for key, value in list_:
        if len(key) >= 2:
            fout.write('{}:{}\n'.format(key, value))

快去进行代码验证吧

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

起飞001

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值