首先在训练营提供的开发机上创建用于评测 conda 环境:
不兼容就改改版本号
评测 API 模型
引入环境变量
创建文件
配置数据集
修改代码
删除重复的文件
开始评测
遇到的问题
1. huggingface_hub==0.25.2不兼容,要0.26以上,按照错误提示安装
2. 遇到如下错误:
更新 transformers
和 sentence-transformers
库:
pip install --upgrade transformers sentence-transformers
3. 提示没rouge模块,重新安装rouge
虽然有报错但是直接运行没什么问题。
运行结果: