16、自然语言处理中的语法与文本标注结构

自然语言处理中的语法与文本标注结构

1. 无限制语法概述

无限制语法在构建自然语言处理（NLP）应用中具有重要作用，例如用于自动释义生成、语义分析和自动翻译等。不过，在考虑其必要性时，需要明确一些语言处理项目的目标并不包括处理诸如曲言、隐喻、转喻等修辞现象，也不涉及计算代词指代、解决照应关系、描述诗歌语言、解决语义歧义、定位文字游戏，更不会进行语言外判断以推断或检查陈述的有效性。因此，不能用这些现象来证明无限制语法或强大形式主义（如中心驱动短语结构语法，HPSG）的必要性。

1.1 语言充分性

存在一些句法现象，使用上下文敏感语法难以描述。例如，包含副词“respectively”的句子：“Joe, Lea, Jean and Rufus are respectively my son, my teacher, my wife and my dog.” 这类句子要符合语法，其主语数量必须等于相应属性的数量，并且需要将每个属性与对应的主语关联起来。

一般情况下，无法构建一个上下文敏感语法来计算任意数量的主语 - 属性对之间的关联。但如果接受对主语 - 属性对的最大数量进行限制，就有可能构建一个上下文敏感语法来处理这类句子。例如，某个上下文敏感语法可以识别包含 4 个主语 - 属性对的句子，并检查每个主语与其对应属性的类型是否相同：
- <$A$ Type=$X$ Type> 检查第一个名字 “Joe” 与第一个属性 “my son” 具有相同类型（如人类、男性）。
- <$B$ Type=$Y$ Type> 检查第二个名字 “Lea” 与属性 “my teacher” 具有相同类型（人类）。
- <