NLP相关的语言学基础

前言

• 自然语言处理是一门融语言学、计算机科学、数学于一体的科学。只会数学和计算机是不够的，本文补充相关的语言学基础。

• 语言学是以人类语言为研究对象的学科。
  探索范围包括语言的性质、功能、结构、运用和历史发展，以及其他与语言有关的问题。

• 语言学的重要分支学科：语法学。

• 相关重要学科：英语语法、汉语语法、句法、词法、现代汉语…

• 主要目的：搞清楚哪些词属于什么词类；词性标注表的由来。

汉语语法

词类

• 词的句法功能分的类

实词	英文名	解释	举个栗子
名词	noun	表示人、事、物、地点或抽象概念的统一名称	亚洲、汽车、人们、健康、过路人、白居易、水
动词	verb	表示动作行为，发展变化，可能意愿及心理活动的词	发展、怕、是、要、能够、会、愿意、肯、应该、值得
形容词	adjective	表示事物性质、状貌特征的词	泪汪汪、偷偷摸摸、不垃圾、冰凉、初级
数词	numeral	表示事物数目的词（基数词、序数词）	一、两、三千、第四、之一
量词	quantifier	表示事物或动作的计量单位	条、张、颗、粒、个、公斤、亩
代词	pronoun	代替名词、动词、形容词、数量词、副词的词	她们、我、谁、这、那里、此
区别词	attributive words	表示人和事物的属性，有区分事物的分类作用	副、慢性、急性、欧式、彩色、上等、初级、大号、万能、人造、冒牌

虚词	English	解释	举个栗子
副词	adverb	常在动词、形容词前面	很、颇、极、十分、就、都、马上、立刻、曾经、居然、重新、不断
介词	preposition	前（pre）置（position）词，常于名词或代词前，表示该词与句中其他成分的关系	把、从、向、为了、往、于、比、被、在、对、以、通过、随着、作为
连词	conjunction	连接短语或句子的词，可以表并列、转折、假设、选择、递进、条件、因果等关系	和、及、或者、又、既、不但、而且、虽然、但是
助词	auxiliary word	附着在其他词汇、词组或句子上，作为辅助之用	的、地、得、所、似的、着、了、过
叹词	interjection	表示感叹、呼唤、应答	唉呀、啊、哼、呸、哎哟、咳、哦、喂、嗯，哎
语气词	modal particle	陈述语气、疑问语气、祈使语气、感叹语气、询问语气、商量语气	吧、罢、呗、啵、啦、嘞、哩、咧、咯、啰、喽、吗、的话、来着、着呢、着哩、着呐、来的、似地
拟声词	onomatopoeia	模拟声音	呜、汪汪、轰隆、咯咯、沙沙沙、呼啦啦、乒、乓

---

专有名词（英语首字母大写、the）	示例
人名	李白、赵云、普朗克、法拉第
事物	赤壁之战、敦刻尔克大撤退、诺曼底登陆、百日维新
地名	桂城、珠江、大辣甲岛、三亚市、云贵高原、
机构	东厂、丐帮、斯坦福大学、妇联、哈佛大学

普通名词	表示某些人，某类事物，某种物质或抽象概念的名称	示例
个体名词	表示单个的人和事物	汽车、房间、风扇、照片
集体名词	表示一群人或一些事物的名称	人们、家庭、集团
复合名词	两个或两个以上名词连在一起构成的名词	过路人、阳台窗
物质名词	表示物质或不具备确定形状和大小的个体的物质	火、银、空气、水
抽象名词	表示动作，状态，品质或其它抽象概念	劳动、健康、生活、友情、耐力

---

能愿动词(助动词)	能用在动词、形容词前面表示客观的可能性必要性和人的主观意愿，有评议作用
表示可能	能、能够、会、可、可能、可以、得以、不能不、不会不、不可能不
表示意愿	愿意、乐意、情愿、肯、要、愿、想要、要想、敢、敢于、乐于、不要不
表示必要	应、应该、应当、得（dei）、该、当、须、须要、须得、须当、理应、理当、不得不、不应不、
表示估价	值得（犯得着）、不值得（犯不着）、便于、难于、难以、易于
表示判断	是、为、乃、乃是、应是、不是不

---

中文代词	示例
人称代词	我、他们、汝、吾辈
疑问代词	谁、什么、怎么、哪、哪儿、怎么、几、咋样
指示代词	这、那里、此、如此、其它、每、各、某、其余、之类、这儿

---

副词	起修饰或限制动词或形容词作用、表程度或范围的词
程度副词	很、极、非常、太、过分
时间副词	已、刚、才、将、要
范围副词	都、全、总、只、仅
情态副词	正好、果然、刚好、依然、全然、悄然
语气副词	准保、确实、不、没有、岂、难道、尤其、甚至、绝对
重复副词	又、再、还、仍

---

连词	一般说来，连词有很多是由副词、介词发展而来的；很多副词、介词又是由动词发展而来
并列关系连词	和、跟、与、既、同、及、而、况、况且、何况、乃至
承接关系连词	则、乃、就、而、便、于是、然后、至于、说到、此外、像、如、比方、接着
转折关系连词	却、虽然、但是、然而、而、偏偏、只是、不过、至于、不料、岂知
因果关系连词	那么、原来、因为、由于、以便、因此、所以、是故、以致
选择关系连词	或、或者、还是、亦、非…即、不是…就是
假设关系连词	若、如果、若是、假如、只要、除非、假使、倘若、即使、假若、要是、譬如
比较关系连词	像、好比、如同、似乎、等于；不如、不及；与其…不如
让步关系连词	虽然、固然、尽管、纵然、即使
递进关系连词	不但、不仅、而且、何况、并、且
条件关系连词	不管、只要、除非
目的关系连词	以、以便、以免、为了

---

语气词	示例	例句
陈述语气	了	做完了。
祈使语气	吧、呀	走吧。
感叹语气	啊	我好帅啊！
疑问语气	呢	猫呢？

---

句子成分

句子成分	可由单词、词组或句子来承担
主语	胖胖的小基用力地亲了小黄三下
谓语	胖胖的小基用力地亲了小黄三下
宾语	胖胖的小基用力地亲了小黄三下
定语	胖胖的小基用力地亲了小黄三下
状语	胖胖的小基用力地亲了小黄三下
补语	胖胖的小基用力地亲了小黄三下
独立语	毫无疑问，菜是她的 嗯，可以出发 呼呼呼，窗外吹起了大风

---

英语语法

句子成分

英语句子成分	定义	e.g.
主语	句子叙述的主体	He told me that this beautiful deer was caught alive yesterday.
谓语	说明主语所发出的动作或具有的特征或状态（动词…）	He told me that this beautiful deer was caught alive yesterday.
宾语	又称受词，是指一个动作的对象或接受者（常位于及物动词或介词后面）	He told me that this beautiful deer was caught alive yesterday.
定语	用来修饰、限定、说明名词或代词的品质与特征的成分（形容词…）	He told me that this beautiful deer was caught alive yesterday.
状语	修饰动词、形容词、副词等的句子成分（副词…)	He told me that this beautiful deer was caught alive yesterday.
补语	作用对象是主语和宾语，具有鲜明的定语性描写或限制性功能（宾语补足语…）	He told me that this beautiful deer was caught alive yesterday.
表语	说明主语的身份、性质、品性、特征和状态	She is a nurse.
同位语	当两个指同一事物的句子成分放在同等位置时，一个句子成分可被用来说明或解释另一个句子成分，前者就叫做后者的同位语	Tom, our new teacher, is very kind to us. He is interested in sports, especially ball games. The news that we won the game is exciting.
独立成分	当一个词、短语或从句用在句子里面，与句子的其他成分只有意义上的联系而没有语法关系时，它就称为独立成分 （呼吁、惊叹语、答语、插入语…）	Yes、No、Oh、Aha…

词类

实词	缩写	在句子中独立担任某些成分	下级分类	示例
名词 noun	n.	表示人或事物的名称	普通名词、专有名词	car、Einstein、London
代词 pronoun	pron.	代替名词、形容词或数词	人称代词 物主代词 反身代词 相互代词 指示代词 疑问代词 不定代词 关系代词 连接代词	he my itself each other this what something which whatever
数词 numeral	num.	表示数量或顺序	基数词、序数词	two、first
动词 verb	v.	表示动作或状态	实义动词 系动词 助动词 情态动词	eat、appear feel be can
形容词 adjective	adj.	表示名词(人或物)的特征		smart
副词 adverb	adv.	修饰动词、形容词、其他副词或全句，表示状态特征或行为	时间频率副词 地点副词 方式副词 程度副词 疑问副词 关系副词 连接副词 表顺序的副词 完成时的副词	often here well too how why however finally ever

虚词	缩写	不能在句子中独立担任任何成分	下级分类	示例
冠词 article	art.	用在名词前，说明名词所指的人、物	定冠词 不定冠词	the a、an
介词 preposition	prep.	用在名词、代词前，表示名词、代词等与其它词的关系	简单介词 合成介词 重叠介词 短语介词 分词介词	in into at about because of including considering
连词 conjunction	conj.	用来连接词与词、短语与短语、句与句	并列连词 从属连词	and、or if、whether
感叹词 interjection	int.	表示说话时的感情或口气		oh、ah

---

auxiliary	协助主要动词构成谓语的词
基本助动词	be、do、have
情态助动词	will(would)、shall(should)、can(could)、may(might)、must、need、dare、ought to、used to……
半助动词	be to、be about to、be due to、be going to、be likely to、be meant to……

---

adverb	the word class that qualifies verbs or clauses
时间频率副词	then、often、always、usually、next、already、never、soon、finally、ago、sometimes、once、twice、lately、recently
地点副词	here、there、everywhere、anywhere、somewhere、inside、outside、back、forward
方式副词	carefully、properly、anxiously、well、calmly、politely、proudly、softly、slowly、bravely
程度副词	much、little、very、rather、so、too、still、quite、enough、extremely、entirely、almost
疑问副词	how、when、where、why
关系副词	when、where、why、
连接副词	therefore、moreover、however、otherwise、then、when、where、how、why
表顺序的副词	first、then、next、finally、afterwards、primarily
完成时的副词	already、ever、just、never、since、yet、recently

句类

按作用分	定义	细分
陈述句	说明一个事实或陈述发言人的看法	肯定句、否定句
疑问句	提出问题	一般疑问句、选择疑问句、反意疑问句、特殊疑问句…
祈使句	表示请求、命令、劝告、建议等
感叹句	表示喜怒哀乐等强烈的情感

按结构分	定义	细分
简单句	只有一套主、谓语的句子
并列句	由两个及以上并列而又互相独立的简单句构成
主从句	由一个主句和至少一个从句构成	主语从句、表语从句、宾语从句、定语从句、状语从句…

疑问句	示例
一般疑问句	Can you speak English?
选择疑问句	考清华还是考北大？
反意疑问句	难道车很快？
特殊疑问句	Whose bike is broken?