全文共2433字,预计学习时长5分钟
1. XLNet:下一代大型自然语言处理框架
传送门:https://github.com/zihangdai/xlnet
自然语言处理是目前机器学习领域最热门的话题,本文也将从这里开始。如果说刚过去的2018年是机器学习发展的关键之年,那么2019年已然超越了它。
XLNet是目前最先进的自然语言处理框架,它给自然语言处理领域,甚至整个机器学习领域带来了翻天覆地的变化。XLNet采用Transformer-XL作为其主干模型。与此同时,开发者还开源了其预训练模型,以便大众学习使用XLNet。
到目前为止,XLNet已经在20项自然语言处理任务上超过了BERT的表现,并且在18项任务上取得了当前最佳效果。下面列出了二者在阅读理解任务的几个常见衡量维度上的测试结果。
如果想了解更多,以下是文本分类任务的测试结果。
毫不夸张地说