项目源码:https://download.youkuaiyun.com/download/qq_38735017/87425257 1.1 语料库的建立 进行语料处理时我们会遇到的主要问题之一就是如何将大的数据集读入内存当中然后进行相应的处理。