NLP01-概述+文本预处理

一、定义

自然语言处理(NLP)是一门研究如何让计算机理解、生成和分析人类语言的学科。

自然语言处理(NLP)是语言学、计算机科学、信息工程和人工智能的子领域，它关注计算机和人类(自然)语言的交互，特别是关于如何通过计算机编程来处理和分析大量的自然语言数据。

二、文本预处理

（一）文本的基本单位——Token

定义:文本的最小单位，例如单词、标点符号。
示例:
原句:"I love NLP."
分词结果:['I'，'love'，'NLP'，'.']

（二）基本的文本预处理

（三）用nltk库做文本预处理

1.nltk库简介

2.文本预处理包

三、实战练习

# 案例
# 对"Natural language pro