PyTorch运行加载数据后占有大量C盘空间如何释放

原创 已于 2022-05-26 09:24:26 修改 · 1.7w 阅读 · 74 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python #pytorch

于 2022-03-24 21:12:28 首次发布
部署运行你感兴趣的模型镜像

刚刚用自己电脑的pycharm运行代码，在加载数据的过程中，数据集特别大，C盘瞬间爆满，原本30多G的空间，最小的时候只剩下几十M的空间，吓得我赶紧暂停了项目，但是C盘上的空间仍未得到充分释放。

尝试使用360清理，也只释放了几个G的空间。

解决方法

首先勾选查看隐藏项目

在C:\Users\用户名\AppData\Local\CrashDumps文件下找到加载的数据，删除即可

（顺便一提，我是根据pycharm的项目地址和文件夹的创建时间找到这个文件夹的）

您可能感兴趣的与本文相关的镜像

PyTorch 2.9

PyTorch 2.9

PyTorch
Cuda

PyTorch 是一个开源的 Python 机器学习库，基于 Torch 库，底层由 C++ 实现，应用于人工智能领域，如计算机视觉和自然语言处理

xaaaab
关注
如何打造具有竞争力的大数据领域数据产品
Python编程之道的博客
08-25 1298
在数据驱动经济时代，大数据产品已成为企业核心竞争力的关键载体。本文提供一个全面的技术框架，指导如何系统性打造具有市场竞争力的大数据产品。从第一性原理出发，我们将深入探讨数据产品的本质特征、价值创造机制、架构设计范式、工程实现路径、运营优化策略及竞争战略。通过整合计算机科学、数据工程、产品管理和经济学的跨学科视角，本文构建了"数据产品价值循环"理论模型，揭示了成功数据产品的内在规律。
解决C盘满了-pytorch
double_double_的博客
04-05 1895
代码位置：Anoconda/envs/使用的环境/Lib/tempfile.py中159行-185行左右。如果想保留各临时文件，又不想C盘炸了，那直接更改保存位置到自定义路径。更改方法如连接所示。
解决pytorch运行后c盘满了的问题
m0_65925957的博客
10-22 5799
把pytorch项目打包成exe文件后运行,发现c直接盘爆满,想必是运行完成后临时文件没有删除的原因,找了半天网上也没有说临时文件是放在哪的,于是自己找
释放内存与加速推理：PyTorch的torch.no_grad()与torch.inference_mode()
最新发布
使者大牙ℂypher的博客
10-24 1256
本文详细介绍、对比了PyTorch中torch.no_grad()与torch.inference_mode()在推理优化中的表现。
torch-geometric安装，被C盘爆红折磨心态的一天，以及解决pycharm每次加载有torch-geometric环境导致C盘爆红的方案，太好使了真的！！！
tianxinyiru的博客
11-09 870
torch-geometric安装，被C盘爆红折磨心态的一天，以及解决pycharm每次加载有torch-geometric环境导致C盘爆红的方案，太好使了真的！！！
python为什么要安装到c盘
01-21
Python安装为什么默认安装到c盘？ 所有的软件如果你不对安装过程的路径进行设置的话都是默认安装到c盘的，不仅仅是Python。 那安装到c盘有什么影响吗？ 对于电脑c盘容量和性能很强大的电脑来说，安装在哪个盘都一样，并没有什么影响。 但是对于电脑凑合能使用的用户来说，最好进行安装路径设置，否则你的电脑会越来越卡。 怎么安装到c盘以外的其他路径？ 你可以在安装过程中注意一下路径设置界面，当进入路径设置界面时，可以把路径改为c盘以外的其他路径。 内容扩展： python可以装在任意的系统盘中，没有强制要求，默认路径是装在C盘。为什么软件默认安装位置是在C盘？下面我们来说一说。 首先，需要明确一
使用Python语言开发的C盘垃圾清理工具！
04-09
C盘垃圾清理工具，已打包成exe的桌面应用程序，下载解压后直接双击exe运行即可自动命令行并完成C盘的临时文件、电脑缓存、垃圾文件、日志等文件清理工作。
关于运行完python程序后c盘空间快速减少的解决方案之一(更新之我的C盘又炸了)
Johnson9903的博客
04-08 1万+
则也是和我一样针对缓存文件而使用的，但本人未能使用上述方法成功解决该问题，通过排查，发现对于 cache这个单词应有敏感，对于磁盘空间在运行程序后越来越满这类问题，一般都与缓存脱不开关系，而cache这个词便是缓存的意思，在计算机中，缓存一般是在c盘用户文件appdata中，也就是像“C:\Users\用户名”这样的路径（这里用户名是电脑开机时输密码界面的那个用户名）。由此，我们又学会一项解决问题的思路，对于莫名减少的空间，一般与缓存有关，可以通过文件大小排查（效率低），也可以通过找与缓存有关的文件夹。
PyTorch运行加载数据后占有大量C盘空间如何释放+C盘用户文件夹里找不到AppData
ISAK__的博客
03-19 1928
PyTorch运行加载数据后占有大量C盘空间如何释放+C盘用户文件夹里找不到AppData
关于操作系统设计的基本原理和设计原则
tugouxp的专栏
03-09 8146
操作系统设计的精妙之处就在于，在底层硬件之上创造了新的抽象， 对于系统初始化来说， 它呈现了执行流到线程转化这一概念，该概念远远比它的实现细节更加重要，处理器以“取指-执行”为周期开始串行执行指令，而初始化代码将自身转化为一个并发处理系统， 这里的关键之处在于，初始化代码并不是创建一个独立的并发系统，然后跳转到新的系统。
【Python栅格数据地理空间分析】：坐标转换与实时更新的秘密
Python栅格数据地理空间分析基础 ## 1.1 栅格数据概念解析 栅格数据由规则的网格单元组成，每个单元格（像素）包含特定的值，用于表示空间分布特征。与矢量数据不同，栅格数据不依赖于几何形状，它能够非常直观地...
【清华源PyTorch安装完全解析】：新手也能快速上手的安装教程
![【清华源PyTorch安装完全解析】：新手也能快速上手的安装教程]...PyTorch，一个开源的机器学习库，因其易用性、灵活性和强大的社区支持，在深度学习领
【PyTorch深度剖析】：PyCharm安装问题的5大根本原因及解决方案
![【PyTorch深度剖析】：PyCharm安装问题的5大根本原因及解决方案]... PyTorch深度剖析概述 在当今快速发展的科技领域，深度学习已成为推
pytorch运行程序后C盘爆红
weixin_43872455的博客
11-11 4288
pytorch运行程序后，C盘爆满，如何释放
Pycharm占用C盘空间越来越大 - 解决办法
热门推荐
yinshuilan的专栏
06-28 2万+
方法1. 修改HOME\idea.properties 因为Pycharm项目缓存C:\Users\<username>\.PyCharm<2018.1>\system\caches下面的content.dat.storageData特别大，占用很多C盘空间，所以要想办法把这些设置移动到D盘 参考原文：https://intellij-support.jetbrains......
关于使用pycharm导致C盘爆满情况的处理策略
pengxiang1998的博客
03-25 4728
首先博主经常使用Pycharm，这个软件在使用过程中会产生大量缓存文件，高达十几个G。最近博主的电脑C盘使用率与日俱增，看着发红的C盘心中一万只草泥马奔过。常规的清除操作都已经做过了，这里教大家从源头解决问题。如此便一下子清爽了许多。随后便开始了博主的清盘之旅。
Pycharm文件占用C盘空间的问题
juluwangriyue的博客
05-12 1万+
最近C盘越来越小，发现.PyCharm2019.3 占内存25.4G. 在pycharm启动的时候都会在“用户”目录下创建.Pycharm文件夹，并且随着pycharm的使用，空间也会逐渐增加，占用大量C盘空间，所以将他转移到别的磁盘中。 首先将.Pycharm2019.3文件夹剪切到所要放置的其他磁盘中（我放到了D:\Program Files\JetBrains pycharm的安装目录中） 然后进入.PyCharm2019.3的bin目录下用记事本打开idea.properties，修改.
C盘爆满，python pip无法安装应用
欢迎来到别往的博客
12-05 1341
从其他盘压缩空间，C盘使用压缩的空间进行扩容，治标不治本，以后C盘还会越来越大。
SSD源码测试---出现的问题----运行pycharm项目每次c盘内存变小！！！
zzzzzzxy95的博客
03-18 5054
问题： 我运行了几次深度学习的项目后，发现我的c盘，越来越小。 原因： 原因是我把数据集放在了项目目录下，每次运行的时候好像都会indic一下，具体原因说实话我也不懂，但是我找到解决方法了！！！参考别人的例子，和实验室人的讲解！！ 解决方法： 将数据集放在项目外面，但是生成的tfrecord文件还是放在项目里面！！！ 生成tfrecord 修改datasets/pascalvoc_t...
pytorch运行加载数据后占用大量c盘空间
05-15
这样会导致占用大量C盘空间。如果数据集过大，将会消耗C盘更多的空间，尤其是在运行批处理器或大实验室任务时。但是，可以通过以下方式来减少C盘空间的占用： 1. 更改缓存路径：PyTorch默认将缓存存储在C盘生产临时...
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值