Facebook发布对话研究框架ParlAI,包含20多种常用数据集

Facebook发布开源对话研究框架ParlAI,旨在提供统一的对话模型训练和测试平台,支持多数据集上的多任务训练,并能与亚马逊Mechanical Turk整合进行数据收集和人工评估。
本文来自AI新媒体量子位(QbitAI)

640?wx_fmt=jpeg&wxfrom=5&wx_lazy=1

昨天,Facebook发布了开源的对话研究软件框架ParlAI。

GitHub地址:facebookresearch/ParlAI

这个框架的目标是为研究者提供以下功能:

  • ■ 一个训练和测试对话模型的统一框架;
  • ■ 同时在多个数据集上进行多任务训练;
  • ■ 与亚马逊Mechanical Turk无缝整合,以便进行数据收集和人工评估。

该框架的第一版包含了20多种常用数据集:SQuAD、bAbI tasks、MCTest、WikiQA、WebQuestions、SimpleQuestions、WikiMovies、QACNN & QADailyMail、CBT、BookTest、bAbI Dialog tasks、Ubuntu Dialog、OpenSubtitles、Cornell Movie以及VQA-COCO2014。

另外,框架还包含PyTorch和Lua Torch下的训练模型示例,既有GPU组训练也有CPU训练。

ParlAI主要维护者之一Jason Weston在Facebook上说,他们希望借助社区力量来增加框架上训练的任务和agent数量。该框架另外两名主要维护者是Alexander H. Miller和Will Feng。

对Facebook人工智能实验室现有的文本研究工具来说是一种补充,例如文本分类工具FastText、通用人工智能开发框架CommAI等。(完)

本文作者:李林 
原文发布时间:2017-05-06 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值