QAnything引擎升级技术通告:DeepSeek-R1适配实践与效果验证
原创 QAnything 团队 QAnything 2025年02月22日 15:55 北京
最近DeepSeek-R1 比较火。春节上班第一天,我们就开始马不停蹄的在QAnything的SAAS服务以及私有化服务里面加上了DeepSeek-R1的支持,问答质量肉眼可见的有提升。
这次我们做了详细的评测,看看到底提升了多少。(虽然RAG的各个环节都可以受益于R1这样的推理模型,但是这次实验我们先看下其他东西都不变,仅改变最后的大模型,有什么样的变化。更多的升级实验的将在下次报告中发出。)
因为目前一些流行的学术评测集和我们的业务场景差距较大,我们从真实业务场景中采样了近千个问题,作为评测集。问题的类型包含:检索、总结、生成、分析、预测、评价、闲聊等。为了让读者有直观的感受,下面是一些问题以及最新的回答(带思考过程):
检索类的问题(查找信息的):
问题:我9月一同出勤了多少天