colab使用指南（二）-加速训练时间。

原创于 2020-05-01 09:38:13 发布 · 2k 阅读

CC 4.0 BY-SA版权

2 篇文章

订阅专栏

本文介绍了一种在Google Colab环境中加速深度学习模型训练的方法，通过预先将数据集复制并解压到Colab的工作目录下，避免了从Google Drive逐批读取数据的效率瓶颈。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

从gdrive中读取训练集再去训练深度模型可能会非常的慢。因为colab会一个batch一个batch copy gdrive中的data到自己的一个工作目录下。即

! pwd
>>>/content

解决方法：

1.将所有的数据集的zip文件都先copy到gdrive的content目录下

2.在content中解压zip文件

3.删除zip文件释放空间

zip_path = base/’size_test/cats_dogs.zip’
!cp “{zip_path}” .
!unzip -q cats_dogs.zip
!rm cats_dogs.zip

或者直接将文件夹拷贝

%cp -av 源文件 目标文件夹