CompHub 实时聚合多平台的数据类(Kaggle、天池…)和OJ类(Leetcode、牛客…)比赛。本账号会推送最新的比赛消息,欢迎关注!
更多比赛信息见 CompHub主页[1]
以下信息由AI辅助创作,仅供参考,请以官网为准(文末阅读原文)

大赛背景
近年来,以ChatGPT、GPT-4等为代表的大语言模型(LLM)掀起了新一轮自然语言处理领域的研究浪潮,展现出了类通用人工智能(AGI)的能力,受到业界广泛关注。在LLM大行其道的背景下,几乎所有的NLP任务都转化为了基于提示的语言生成任务。然而,在中文医学NLP社区中,尚未有一个统一任务形式的评测基准。为推动LLM在医疗领域的发展和落地,华东师范大学王晓玲教授团队联合天池团队推出PromptCBLUE评测基准,将CBLUE基准进行二次开发,将16种不同的医疗场景NLP任务全部转化为基于提示的语言生成任务,形成首个中文医疗场景的LLM评测基准。PromptCBLUE将作为CCKS-2023的评测任务之一,依托于天池大赛平台进行评测。
大赛赛道
考虑到目前的LLM训练可能涉及商业数据,大规模模型开源受到各种外在条件的限制,我们将对PromptCBLUE评测开放两个赛道:
PromptCBLUE:中文医疗场景LLM评测基准与天池大赛

华东师范大学王晓玲教授团队与天池团队合作推出PromptCBLUE,首个中文医疗场景的LLM评测基准,旨在推动LLM在医疗领域的应用。大赛设有通用赛道和开源赛道,参赛者需使用LLM解决16种医疗NLP任务,测试集分为A、B两榜,比赛将于2023年7月结束,鼓励使用开源模型和数据集。
最低0.47元/天 解锁文章
3217

被折叠的 条评论
为什么被折叠?



