光英的记忆博客

import gensimimport mathimport jiebaimport jieba.posseg as possegfrom jieba import analysefrom gensim import corpora, modelsimport functoolsimport numpy as np# 停用词表加载方法# 停用词表存储路径，每一行为一个词，按...

import jiebaimport jieba.analyse as aly# 中文 分词工具jiebasent = '中文分词是文本处理不可或缺的一步！'seglist = jieba.cut(sent, cut_all=True)print("全模式", '/'.join(seglist))# 全模式 中文/分词/是/文本/文本处理/本处/处理/不可/不可或缺/或缺/的/一...

import jiebaimport jieba.posseg as possegimport refrom datetime import datetime,timedeltafrom dateutil.parser import parser# 中文词性标注和命名实体识别sent = "中文分词是文本处理不可或缺的一步！"seglist = posseg.cut(sent)...