
NLP
Foina数据分析狮
公众号 DataLion
定期分享数据分析和机器学习的技术。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
自然语言处理(NLP)知识结构总结
原文:https://blog.youkuaiyun.com/meihao5/article/details/79592667?tdsourcetag=s_pcqq_aiomsg一、自然语言处理概述1)自然语言处理:利用计算机为工具,对书面实行或者口头形式进行各种各样的处理和加工的技术,是研究人与人交际中以及人与计算机交际中的演员问题的一门学科,是人工智能的主要内容。...转载 2019-06-26 09:37:15 · 561 阅读 · 0 评论 -
NLP之文本表示-词袋模型
一 文本表示文本表示是自然语言处理的开始。含义:把字词处理成向量或矩阵,以便计算机能进行处理。按照细粒度划分,一般可分为字级别、词语级别和句子级别的文本表示。eg:刘诗诗实在太可爱了,我想娶”这句话拆成一个个的字:{刘,诗,实,在,太,可,爱,了,我,想,娶},然后把每个字用一个向量表示,那么这句话就转化为了由11个向量组成的矩阵。文本表示分为离散表示和分布式表示。离散表示的...原创 2019-07-01 17:51:31 · 2768 阅读 · 0 评论 -
隐马尔可夫模型(1)基本概念
1.隐马尔可夫模型基本概念1.1隐马尔可夫模型定义1.1.1基本概念状态序列(Y):隐藏的马尔可夫链随机生成的状态序列,称为状态序列。观测序列(X): 每个状态生成一个观测,而由此产生的观测的随机序列,称为观测序列。马尔可夫模型:是关于时序的概率模型,描述由一个隐藏的马尔可夫链随机生成不可观测的状态随机序列,再由各个状态生成一个观测而产生观测随机序列的过程。1.1.2形式定义...原创 2019-08-13 17:33:39 · 589 阅读 · 0 评论 -
隐马尔可夫模型(2) 概率计算方法
1直接计算方法10.10的推导P(I∣λ)=P(i1,i2,...,iT∣λ)P(I|\lambda)=P(i_1,i_2,...,i_T|\lambda)P(I∣λ)=P(i1,i2,...,iT∣λ) =P(i1∣λ)∗P(i2∣i1,λ)∗P(i3,i4,...,iT∣λ)=P(i_1|\lambda)*P(i_2|i_1,\lambda)*P(i_3,i_4...原创 2019-08-14 17:57:18 · 663 阅读 · 0 评论