司南·Daily Benchmark 专区今日上新!
AECV-Bench
一个用于评估多模态与视觉-语言模型在真实 AEC 图纸理解能力上的评测基准,涵盖两类互补的应用场景:目标计数任务和图纸支撑的文档问答任务。
https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2004819
APEX-Bench
首个系统性的学术海报编辑评测基准,包含 514 条编辑指令,并基于操作类型、任务难度与抽象层级等多维分类体系进行标注,结合有参考与无参考两种构建策略,以确保任务的真实度与多样性。
https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2004794
PILOT-Bench
首个以美国专利商标局专利审判与上诉委员会(PTAB)真实裁决案件为核心构建的评测基准,用于系统评估大语言模型在专利法律领域进行结构化法律推理的能力。
https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2004758
Knowme-Bench
一个新型长期记忆评估基准,突破传统对话或合成数据范式,采用真实长篇自传体叙事构建评估体系。
https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2004745
4456



被折叠的 条评论
为什么被折叠?



