【企业级NLP赛事】正式开赛_turn level-优快云博客

◆ 2021 NLP领域算法挑战竞赛 ◆

大赛简介：
心理对话问答挑战赛是由测测星座主办的NLP领域算法挑战竞赛，本次比赛主要是针对心理学领域的单轮问答式对话进行研究。

人机对话在NLP领域是一项重要的研究分支，从技术上来说具有挑战性与趣味性。在AI+的科技创新背景下，测测以AI技术在心理领域的深度融合应用为企业目标，广发英雄帖邀请各界算法科学家前来参赛、研究。

本次赛题要求参赛者通过语义理解、合理文本生成等技术的实现，构建精准的算法模型，推动“AI+心理”的技术突破创新。

FlyAI竞赛服务平台

2021年02月03日

时间节点 Time node

报名时间：2月3日-3月12日

▎初赛时间：2月3日-3月18日

▎决赛时间：3月22日

奖项设置

1.依据什么排名？

初赛排行榜排名顺序按照精度排名为主要排名，若精度成绩相同，则运行速度较小的成绩排名靠前。

2.人工评审阶段？

超过 45 分且模型运算速度不超过800s的成绩参与综合得分计算，未符合条件者不参与综合排名计算；

若排行榜展示精度成绩超过45分但速度超过800s,则取参赛者符合条件的历史精度成绩计算，否则不参与计算；

根据初赛榜单前15名进入到人工评审阶段，包括turn-level评估和dialog-level评估；

turn-level评估：流利度、适当度、信息量、主动性；

dialog-level评估：连贯性、成功率、顺序质量；

*每个问题仅取前3条答案为评估依据

人工评审阶段需要对话系统与评审人员进行实际对话，最终的比赛排名将以人工评审结果为准。综合成绩前10名进入答辩环节。

3.线上答辩？

答辩环节主要考察模型方案本身的创新和应用价值以及选手综合能力，先由评委根据各个项目进行打分，然后进行排名，最后计算答辩排名得分。

4.总成绩计算规则？

0.7 * 初赛综合排名得分 + 0.3 * 答辩排名得分

赛事咨询

FlyAI小助手

赛事官方群

【企业级NLP赛事】正式开赛