- 博客(7)
- 收藏
- 关注
原创 如何下载image-net数据集
用这个命令wget https://image-net.org/data/ILSVRC/2012/ILSVRC2012_img_train.tar --no-check-certificate。
2025-07-28 19:14:04
243
原创 nvidia-smi 实时刷新 实时显示显存使用情况
https://blog.youkuaiyun.com/sinat_26871259/article/details/82684582
2025-07-22 19:52:35
132
原创 transformers组件学习2--tokenizer
上面包括模型的参数比如padding_size='right’代表模型是左对齐如果要进行填充的话会在句尾添加。如果不是本地运行的这里transformers的函数里面也有如下提示。基于python实现,速度慢。基于Rust实现,速度快。
2025-07-20 22:23:40
238
原创 Transformers组件学习1--pipeline
它列出了 Transformers 内置支持的所有任务(如情感分析 sentiment-analysis、问答 question-answering、文本生成 text-generation 等),以及每个任务对应的默认配置和模型类型。Transformers 是 Hugging Face 开发的一个库,提供了大量基于 Transformer 架构的预训练模型,极大地降低了深度学习模型开发的门槛。职责:把你写的字符串文本(“我爱北京天安门”)转成模型能读懂的数字 ID 序列([101, 2769, …
2025-07-20 21:40:10
612
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅
1