简单记录下在Autodl使用huggingface下载模型血泪经验

最新推荐文章于 2025-10-28 14:31:23 发布
原创 最新推荐文章于 2025-10-28 14:31:23 发布 · 7.1k 阅读 · 49 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#深度学习 #pytorch #人工智能 #python

作者在尝试使用ERNIE和Roberta模型时遇到HuggingFace库连接问题，发现是由于科学上网设置和本地pip包版本导致。通过升级requests和urllib3包至特定版本，作者成功解决了下载模型的错误。

一开始使用的是bert模型，把需要的文件都下载在了自己的电脑上，然后上传autodl的文件夹，所以没有什么问题。。
然后我就想试试ERNIE，Roberta什么的，觉得手动下载非常麻烦，还很不高大上，但自己from_pretrained总是报错，说无法连接到huggingface网站。。
知道huggingface被墙了，但是我确实在科学上网呢。。
搞半天发现我自己本机科学上网和我租的云有什么关系。。所以用autodl帮助文档里的方法设置了科学上网。。
但下载模型还是报错 HTTPSConnectionPool(host=‘huggingface.co‘, port=443)，在网上找了解决办法 文章
改了下面两个包的版本，然后就成功了！

pip install requests==2.27.1
pip install urllib3==1.25.11
在autodl服务器上从huggingface上下载模型，踩了很多坑
weixin_61734402的博客
03-12 1873
在autodl服务器上从huggingface上下载模型，踩了很多坑
AutoDL如何下载huggingface模型
热门推荐
watermelon_c的博客
05-10 1万+
本人使用AutoDL下载huggingface时，下面是我尝试过的一些方法，但有的方法对我来说没用，最后一种方法是最方便的，如果不想尝试前面的几种方法可以直接用最后一种。由于AutoDL和阿里网盘是可以相互传输数据的，所以就先通过colab将模型下载到阿里网盘，再将模型上传到AutoDL。如果使用huggingface官网下载模型，首先需要利用token登陆，如果没有token，需要先在。查阅资料后解释是模型太大，下载过程网路不稳定，需要关闭VPN，所以该方法对下载太大的模型可能行不通。
怎么在AutoDL上面使用HuggingFace（亲测有效）
逐梦苍穹的博客
01-31 6474
在AutoDL上面使用HuggingFace，2025年1月29日亲测有效
记录一下大模型本地部署学习
最新发布
xsh1767044593的博客
10-28 706
4. **格式与长度：** [指定输出的格式和长度，例如：输出一份包含引言、三个主要章节（每章下有3个要点）和结论的大纲，总长度不超过500字]。2. **关键点/元素：** [列出必须包含的关键信息、要点或元素，例如：必须提到褪黑素、蓝光影响、以及三个具体的睡前放松方法]。5. **避免事项：** [列出任何需要避免的内容，例如：避免使用“据说”等模糊词汇，不要推荐任何特定品牌的保健品]。3. **风格与语气：** [描述期望的文风或语气，例如：专业但通俗易懂，带有鼓励性，避免过于学术化]。
关于AutoDL的随笔（学术加速、huggingface、远程桌面）
weixin_55023359的博客
09-18 580
本文介绍了AutoDL服务器的几项关键配置：1. 网络加速设置，包括GitHub和HuggingFace的访问优化；2. HuggingFace缓存路径修改方法，避免占用系统盘空间；3. VNC远程桌面配置步骤，包含服务端安装、密码设置、端口配置和开机自启设置；4. 图形界面xfce4的安装与配置；5. AutoDL-SSH-Tools工具的使用说明。特别强调了端口一致性（5901）对远程桌面连接成功的重要性。这些配置可有效提升云计算服务器的使用体验和资源管理效率。
AutoDL使用指南&&AutoDL中快速下载huggingface模型/数据集的方法
a131529的博客
02-19 5615
AutoDL使用指南&&AutoDL中快速下载huggingface模型/数据集的方法
AutoDL 下载 Huggingface 模型
yangpx0427的博客
03-27 545
【代码】AutoDL 下载 Huggingface 模型。
AutoDL云服务器怎样使用huggingface
qq_51109206的博客
11-22 1015
只需要在代码前面设置镜像链接和token即可。
解决AutoDL服务器无法访问huggingface或SSL证书验证错误
Rhett_Butler0922的博客
07-22 6827
如果无法访问huggingface，可以先使用AutoDL的学术资源加速，在程序开头添加以下代码。如果启用学术资源加速后遇到SSL证书验证错误
【解决】pycharm远程开发通过ssh连接Autodl时，运行代码超时（huggingface连不上）
CounterGlew的博客
06-17 922
AutoDL学术加速功能在PyCharm远程连接时可能失效导致huggingface访问超时，原因是右键运行代码不会继承终端代理配置。解决方案：查看/etc/network_turbo脚本内容获取代理参数，在PyCharm运行配置的环境变量中手动添加这些参数（如http_proxy等）。具体步骤：通过cat命令查看脚本内容，然后在PyCharm的"运行-编辑配置"中添加对应环境变量。
Autodl调用huggingface的模型
03-17
在使用 AutoDL 调用 Hugging Face 的模型之前，需要先完成环境配置和依赖安装。这通常包括创建 Python 文件（如 `model_download.py`），并通过该文件下载所需的模型[^2]。此外，还需要确保能够正确加载模型及其权重...
本地下载huggingface模型并在服务器上使用流程
weixin_44151034的博客
06-24 1万+
AutoModelForSequenceClassification 类是基于PyTorch的，因此需要安装PyTorch才能使用。我发现：大家加载huggingface模型，基本都是使用这两条代码来下载相关的文件的，所以我们只要找到这两条代码在哪里，就能找到文件的下载位置。但是我还是感觉很奇怪，就是它们是怎么知道需要把模型下载到哪里的，我能不能下次代码报错，自己发现需要把代码下载到哪里？之后我就通过代码连接不成功的报错，还有一些调试搜索方法，在这个头文件中找到这两行相关代码。参考了上面的帖子，找到了。
autodl 使用 huggingface_hub
01-01
### 使用 huggingface_hub 在 AutoDL 环境中进行模型或数据集操作 为了在AutoDL环境中成功使用`huggingface_hub`库执行模型或数据集的操作，需注意几个关键点： 安装合适的`huggingface_hub`版本对于避免兼容性...
在Autodl上用wget命令从HuggingFace下载数据
qq_52436400的博客
04-29 760
，而实际下载需要替换为 resolve/main。Hugging Face 的文件下载链接需要将。下载 Hugging Face 文件时遇到。错误，通常是因为直接使用了网页浏览器的链接（# 正确示例（使用 resolve/main）或确保 URL 格式正确。# 错误示例（网页浏览链接，会返回404）
AutoDL使用学习
缘友一世的博客
08-16 2347
AutoDL使用学习
autodl下载hugging的数据集和模型
weixin_63681863的博客
10-28 511
【代码】autodl下载hugging的数据集和模型。
AutoDL服务器huggingface模型下载到.cache了怎么办
Karl_Wayne的博客
12-22 2399
简而言之，local_dir里只有符号链接，真正的模型文件在.cache里。所以很容易想到把.cache里的文件移到数据盘，然后修改符号链接至新地址。
在服务器（AutoDL）用Ollama下载模型到数据盘
y020311的博客
08-07 362
如果移动的是整个.ollama目录。# 移动整个models目录到数据盘。# 或者移动整个.ollama目录。模型文件现在存储在50G的数据盘上。以后下载的新模型也会存储在数据盘上。# 如果移动的是models目录。Ollama仍然可以正常访问模型。检查软链接是否创建成功。检查数据盘上的模型文件。
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值