14、自然语言统计分析与统计模型介绍

最新推荐文章于 2025-11-25 00:15:54 发布

study

最新推荐文章于 2025-11-25 00:15:54 发布

阅读量31

点赞数

CC 4.0 BY-SA版权

分类专栏： MATLAB文本挖掘实战文章标签：自然语言处理统计分析 n-元语法模型

本文链接：https://blog.youkuaiyun.com/study/article/details/151211304

MATLAB文本挖掘实战专栏收录该内容

35 篇文章 ¥499.90

订阅专栏¥69.90

会员秒杀 ¥9.9 重磅福利

超级会员免费看

自然语言统计分析与统计模型介绍

1. 词相对位置分布分析

观察图7.5下半部分，展示了探测词“to”和“for”相对于参考词“go”的相对位置直方图。与前两个例子不同，这两种情况似乎没有对特定位置的偏好，可能位置的分布更加多样。不过，“to”和“for”呈现出两种相反的趋势：“to”更可能出现在离“go”很近的位置，而“for”更可能出现在离“go”较远的位置。
- “to”的位置分布 ：除了“to go”和“go to”这两种常见情况，“to”还经常出现在“go”之后两个位置，如“go up to”和“go out to”；接下来最常见的位置是在参考词“go”之后三个位置，例如“go with me to”和“go before it to”。
- “for”的位置分布 ：在“for”与“go”的短距离依赖关系中，最常见的位置是在“go”之后三个位置，如“go thy way for”“go before us for”“go with these for”等；其次是偏移四个位置，如“go out to battle for”“go to the seer for”“go out against them for”等。然后，“go”之后偏移两个位置和“go”之前偏移四个位置也是较常见的位置，分别有“go out for”“go up for”和“for thou shalt not go”“for the shadow to go”等表达。另外，“go for”是可能的组合，但“for go”从未出现。