【nlp】4.2 nlp中标准数据集（GLUE数据集合中的dev.tsv 、test.tsv 、train.tsv）

1 GLUE数据集合介绍

1.1 数据集合介绍

GLUE由纽约大学, 华盛顿大学, Google联合推出, 涵盖不同NLP任务类型, 截止至2020年1月其中包括11个子任务数据集, 成为衡量NLP研究发展的衡量标准.

• CoLA 数据集
• SST-2 数据集
• MRPC 数据集
• STS-B 数据集
• QQP 数据集
• MNLI 数据集
• SNLI 数据集
• QNLI 数据集
• RTE 数据集
• WNLI 数据集
• diagnostics数据集(官方未完善)

1.2 数据集合路径

数据集在虚拟机/root/data/glue_data下，总结如下

2 GLUE子数据集的样式及其任务类型

2.1 CoLA数据集文件样式

数据集释义:CoLA(The Corpus of Linguistic Acceptability，语言可接受性语料库)纽约大学发布的有关语法的数据集