bokecai的专栏

一、统计语言模型基本原理 一个句子是否合理，就看它出现的可能性大小如何。至于可能性就用概率来衡量 假设 S 表示某个句子，此句子有一连串按照特定顺序排列的词 w1, w2, ..., wn 组成，其中 n 表示词的个数。现在我们想知道 S 在文本中出现的可能性，用数学表示就是 S 的概率 P(S)。既然 S = w1, w2, w3, ..., wn，不妨把 P(S) 展开表示：