- 博客(3)
- 收藏
- 关注
原创 解决 pytoch CUDA out of memory 报错
项目场景:pytorch 在 预测阶段的 CUDA out of memory 问题问题描述使用 pytorch 时,保存模型后,读入并预测新的大量数据, 会出现 CUDA out of memory ,哪怕 batch_size = 1原因分析:累计的梯度计算number_workers过大解决方案:调用方法时,不使用梯度计算调小torch.utils.data.DataLoader方法中的 number_workers参数即可...
2022-05-22 21:40:37
620
原创 python数据预处理---标准化归一化方法介绍与比较
文章目录前言一、什么是 and 为什么要标准化二、方法介绍与实操1.实现中心化和正态分布的Z-Score2.实现归一化的Max-Min3.用于稀疏矩阵的MaxAbs4.针对离群点RobustScaler方法总结与方法选择前言数据预处理是数据化运营过程中的重要环节,他直接决定了后期所有的数据工作的质量和价值输出。包括数据清洗、转换、规约、聚合、抽样等。本文主要介绍标准化的主要方法,并给出代码实操。一、什么是 and 为什么要标准化数据标准化是一个常用的数据预处理操作,目的是处理不同.
2020-10-06 20:28:06
1511
原创 win+anaconda(juypter notebook)安装tensorflow等三方库、及系统环境配置,新手教程
Win+anaconda(juypter notebook)安装tensorflow、及环境配置,新手教程anaconda下载首先,我们需要下载anaconda,由于anaconda官网是国外网站,下载速度教慢,我们可以使用清华开源镜像软件下载网站(安全快速):https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/;之后选择所需要的版本如下:如果你的电脑是64位,选择x86_64;32位选择x86!最好下载跟自己电脑匹配的版本!!!下载安装即可
2020-09-07 13:24:09
1046
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人