- 博客(8)
- 收藏
- 关注
原创 UserWarning: Could not find response key `[2468, 8757, 842, 91, 29, 77091...报错解决
目前在复现 https://github.com/RManLuo/graph-constrained-reasoning/tree/main 这个项目,改用自己的数据集去做。也有解决方案提到一些其他办法:https://github.com/huggingface/trl/issues/588。我的这个是 <|start_header_id|>assistant<|end_header_id|>出现这个错误,首先可以去qwen的vocab里做一个查询,看看这个找不到的token到底是什么。
2025-02-18 16:59:40
257
原创 pip install时error: subprocess-exited-with-error问题解决
尝试了很多办法也没有用,最后在一篇博客中发现是包名错误,虽然py文件运行时,说的是no module named dotenv,但其实这个包的全名叫做python-dotenv。只需要知道sklearn其实是包含在scikit-learn这个包里,pip install scikit-learn,就可以顺利安装和使用了。再比如no module named sklearn,如果pip install sklearn也会出现同样错误。不过当然,这只是一种可能,也有可能是环境依赖冲突等问题。
2025-02-14 09:53:53
852
原创 SFT训练时,损失LOSS一直为0的问题解决方案
分词器处理文本时,可能会根据文本上下文生成不同token ID,当文本中包含更多单词时,分词器可能产生不同token id,这导致在预处理数据时,响应模板中的token id与实际数据中的不匹配,从而导致模型无法正确识别响应部分。在NLP任务尤其是生成式任务中,通常会有一个响应模板,用于标记模型的输出部分,这个模板用于知识模型生成的答案部分。确保在预处理数据时,响应模板的token id与实际数据中的token id一致。默认为True的话,就会在里面有一些< SEP>什么的,导致识别失败。
2025-02-13 17:10:53
929
原创 自定义module时 出现报错ImportError: No module named utils 解决方法!
已解决 报错ImportError: No module named utils
2022-12-13 23:44:14
5682
3
原创 关于android studio的Mysql出现The last packet sent successfully to the server was 0 milliseconds ago问题解决
由于connecter版本过高导致无法成功连接,将8.0以上的connecter改为5.1版的之后,问题得到解决。
2021-02-01 14:53:59
493
原创 MAC Eclipse+Tomcat+Mysql实现网页登录注册
MAC Eclipse+Tomcat+Mysql实现网页登录注册所用配置MAC 10.13.6Eclipse 4.12 for Mac OS XTomcat 9.0.40Mysql 8.0.12Mysql ConnectorJ 8.0.22Navicat Premium 12.0.27以上是所有需要的配置和软件,发布网页时用到了小米路由器总体过程1.做好Eclipse相关配置,将Tomcat和Mysql连接到Eclipse上2.在Eclipse里写代码,在Navicat里创建数据库
2020-12-06 17:53:50
1873
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅