【数据科学赛】PromptCBLUE:首个中文医疗场景LLM评测基准 #¥16000

PromptCBLUE:中文医疗场景LLM评测基准与天池大赛
华东师范大学王晓玲教授团队与天池团队合作推出PromptCBLUE,首个中文医疗场景的LLM评测基准,旨在推动LLM在医疗领域的应用。大赛设有通用赛道和开源赛道,参赛者需使用LLM解决16种医疗NLP任务,测试集分为A、B两榜,比赛将于2023年7月结束,鼓励使用开源模型和数据集。

CompHub 实时聚合多平台的数据类(Kaggle、天池…)和OJ类(Leetcode、牛客…)比赛。本账号会推送最新的比赛消息,欢迎关注!

更多比赛信息见 CompHub主页[1]


以下信息由AI辅助创作,仅供参考,请以官网为准(文末阅读原文

大赛背景

近年来,以ChatGPT、GPT-4等为代表的大语言模型(LLM)掀起了新一轮自然语言处理领域的研究浪潮,展现出了类通用人工智能(AGI)的能力,受到业界广泛关注。在LLM大行其道的背景下,几乎所有的NLP任务都转化为了基于提示的语言生成任务。然而,在中文医学NLP社区中,尚未有一个统一任务形式的评测基准。为推动LLM在医疗领域的发展和落地,华东师范大学王晓玲教授团队联合天池团队推出PromptCBLUE评测基准,将CBLUE基准进行二次开发,将16种不同的医疗场景NLP任务全部转化为基于提示的语言生成任务,形成首个中文医疗场景的LLM评测基准。PromptCBLUE将作为CCKS-2023的评测任务之一,依托于天池大赛平台进行评测。

大赛赛道

考虑到目前的LLM训练可能涉及商业数据,大规模模型开源受到各种外在条件的限制,我们将对PromptCBLUE评测开放两个赛道:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值