huggingface数据集加载错误;huggingface.datasets无法加载数据集和指标的解决方案:datasets.exceptions.DatasetGenerationError: A
我试过直接把这个Python文件下载下来,然后上传到服务器上,但是操作了半天也不行,因为这个Python文件里面给出的数据下载链接在谷歌云,但是直接把那个数据下下来上传还是不行,修改数据下载链接到S3文件也不行。指标的简单一点,只要把这个Python文件下载到本地(这个可以不用代理。对于不方便直接使用代理的情况,以下介绍我使用的解决方案:在本机使用代理,然后将文件上传到运行环境的解决方案。大略来说,我的成功做法就是现在本地加载数据集,然后储存到磁盘,然后将文件夹上传至服务器,并从磁盘直接加载数据集。
原创
2024-02-07 13:55:58 ·
7104 阅读 ·
0 评论