m0_61133560的博客

Transformer 模型是 BERT 的基石之一，同时 Transformer 模型也是通过注意力机制来进行构建的。右图是 Transformer 的模型结构图，其中编码器和解码器是 Transformer 的核心结构。

未加载自定义字典时使用精确切分来进行分词seg_list = jieba.cut('心灵感应般地蓦然回首，才能撞见那一低头的温柔；也最是那一低头的温柔，似一朵水莲花不胜凉风的娇羞；也最是那一抹娇羞，才能让两人携手共白首。')print('未加载自定义词典时的精确模式分词结果：\n', '/'.join(seg_list)) # 心灵感应/般地/蓦然回首/，/才能/撞见/那一/低头/的/温柔/；/也/最/是/那/一/低头/的/温柔/，/似/一朵/水/莲花/不胜/凉风/的/娇羞/；

TF-IDF关键词提取算法

【代码】基于词表的三种分词算法。

【代码】基于Textrank算法的两种关键词提取。