8、自然语言理解库与工具选择及数据准备-优快云博客

本文链接：https://blog.youkuaiyun.com/lambda/article/details/151098936

自然语言理解库与工具选择及数据准备

1. 示例引入

为了说明自然语言处理中的一些概念，我们将使用 JupyterLab 来探索电影评论的情感分析（SA）任务。我们会使用 NLTK 和 spaCy 包来了解数据情况，为进一步处理做规划。我们要使用的语料库是一个包含 2000 条电影评论的流行数据集，该数据集对评论中的情感倾向（积极或消极）进行了分类，数据集可从这里下载。

2. 搭建 JupyterLab 环境

要开始使用 JupyterLab，可在命令行（Windows）或终端（Mac）中输入以下命令：

$ jupyter lab

此命令会启动一个本地 Web 服务器，并在浏览器中打开 JupyterLab 窗口。在 JupyterLab 窗口中，选择“File | New | Notebook”来创建一个新的笔记本，你可以随时选择“File | Rename Notebook”为其重命名。

接下来，我们要导入所需的库，代码如下：

# NLP imports
import nltk
import spacy
from spacy import displacy
# general numerical and visualization imports
import pandas as p