Unable to allocate X GiB for an array with shape np.zeros过大

最新推荐文章于 2022-04-15 09:53:20 发布
最新推荐文章于 2022-04-15 09:53:20 发布
阅读量4.8k 收藏 1
点赞数
分类专栏： Python学习 编程开发 文章标签： python ubuntu numpy
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_33566282/article/details/116136940
版权

在ubuntu，python下使用np.zeros创建较大numpy矩阵时报错了，原因时申请不了这么大的空间，解决方法如下。

查看过载处理模式

cat /proc/sys/vm/overcommit_memory

如果是0的话，输入su root输入root密码，切换到root用户模式进行修改。
看到$变成了#，输入

echo 1 > /proc/sys/vm/overcommit_memory

修改过载模式，再运行就OK啦。

参考链接：https://blog.youkuaiyun.com/WILDCHAP_/article/details/107558421

numpy.core._exceptions.MemoryError: Unable to allocate 1.45 GiB for an array with shape (13935, 1393
weixin_46713695的博客
04-13 6902
numpy.core._exceptions.MemoryError: Unable to allocate 1.45 GiB for an array with shape (13935, 1393
问题：Unable to allocate 6.12 GiB for an array with shape (312, 50, 13, 90, 90) and data type float32
chifandiyi的博客
01-16 1235
运行python脚本报错Unable to allocate 6.12 GiB for an array with shape (312, 50, 13, 90, 90) and data type float32。解决方法:1.此电脑——属性——高级系统设置 2.高级系统设置——设置 3.高级——更改虚拟内存。
Unable to allocate xxx GiB for an array with shape (xxxx, xxxx)
热门推荐
CoolCoolCarrot的博客
04-13 12万+
今天用Pycharm跑代码的时候报了个错误：Unable to allocate 14.1GiB for an array with shape (xxxx, xxxx)，主要是进行矩阵运算时涉及的矩阵太大了，导致分配的内存不够用，网上搜索了一些方法，最后成功解决。 由于是用实验室服务器跑的代码，首先是确定服务器上的内存确实够用，使用命令free查看内存分配情况： 可以看出，未使用...
成功解决Unable to allocate xxx MiB for an array with shape (xxxx, xxxx)
get_py的博客
04-15 8万+
原因 数据量太大，导致cpu内存不足导致的 解决方法 换个性能更好的电脑 numpy 在定义数组的时候，采用更低的精度。从float64降低为float32array_ = np.zeros((10000,10000),dtype='float32') # 默认float64 修改pycharm的运行内存 Help->Find Action->(type “VM Options”)->(Click)“Edit Custom VM Options” 打开pycharm64.exe.
【python】运行报错：Windows MemoryError: Unable to allocate 6.38 GiB for an array with shape
qq_45110581的博客
10-08 1万+
1.参考链接 成功解决Windows MemoryError: Unable to allocate 6.38 GiB for an array with shape (38
MemoryError: Unable to allocate 6.73 GiB for an array with shape (3000, 3, 448, 448) and data type f
勿忘初心,方得始终
05-16 8829
在ubuntu系统上得docker中运行pytorch代码，报出如下错误 MemoryError: Unable to allocate 6.73 GiB for an array with shape (3000, 3, 448, 448) and data type float32 主要是因为一次开辟得内存过大，此时 1、内存过载处理模式 cat /proc/sys/vm/overcommit_memory 应该显示是0 2、切换到root身份并更改处理模式 echo 1 > /proc/s
voxel_grid = np.zeros(voxel_shape) numpy.core._exceptions.MemoryError: Unable to allocate 88.4 GiB for an array with shape (4127, 6141, 468) and data type float64
06-13
这个错误是由于程序尝试创建一个非常大的数组，但是系统内存不足。 为了解决这个问题，您可以尝试以下方法： 1. 减小体素大小。如果将体素大小设置为更小的值，则可以减少体素网格的大小，从而减少所需的内存空间...
numpy.core._exceptions.MemoryError: Unable to allocate 2.80 GiB for an array with shape (3001133055,) and data type bool
最新发布
03-20
### Numpy MemoryError...针对 NumPy 报告的 “Unable to allocate” 内存溢出异常，推荐先评估现有算法是否存在冗余或者低效之处，并优先尝试上述软件级改进措施。只有当这些都不足以解决问题时才应考虑更换硬件设施。
MemoryError: Unable to allocate 29.9 GiB for an array with shape (63321, 63321) and data type float64
11-13
这个错误通常是由于内存不足导致的。解决这个问题的方法有以下几种： 1.使用更大的内存或者更高配置的计算机。...arr = np.memmap('data.bin', dtype=np.float64, mode='w+', shape=(63321, 63321)) ```
numpy.core._exceptions.MemoryError: Unable to allocate 40.8 GiB for an array with shape (18, 128, 128, 37120) and data type float32
10-22
这个问题表明试图分配18x128x128x37120个32位浮点数所需的内存超过了40.8吉字节（GiB），这是由于内存不足导致的。 解决此问题的方法通常包括： 1. **调整数组大小**：如果可能，减少数组的维度或每个维度的大小以...
MemoryError: Unable to allocate array with shape (61721, 16000) and data typ
信徒博客
12-02 7万+
疑惑 解惑 数据量太大了，也就是cpu内存小导致的； 可以从以下几个方面去改进： 0、换一个性能好的电脑，主要是硬件的问题 1、numpy 在定义数组的时候，采用更低的精度。从float64降低为float32 array_ = np.zeros((10000,10000),dtype='float32') # 默认float64 2、修改pycharm的运行内存 He...
surprise numpy.core._exceptions._ArrayMemoryError: Unable to allocate 864. GiB for an array with
小白tree的博客
02-02 9480
在使用surprise对google数据集进行基于用户的推荐算法（KNNBaseline）训练时，内存超限报错如下 numpy.core._exceptions._ArrayMemoryError: Unable to allocate 864. GiB for an array with shape (340553, 340553) and data type float64 原因也很简单： 数据集中一共有书籍340553本，如果计算共现矩阵，则会在numpy创建340553 X 340553大小的矩阵
Python Unable to allocate MiB for an array with shape
Nicky's blog
04-07 1万+
pycharm Unable to allocate 75.9 MiB for an array with shape (17, 1170427)，自己遇到的情况是通过升级python版本为64位处理的，python32位有些程序内存空间不支持，因为程序是接手的，所以排查程序比较花时间，所以通过升级python版本运行，记录一下，python版本位数也会影响程序运行
报错：Unable to allocate array with shape and data type
qq_43392533的博客
05-08 8566
内存问题： Windows 10： Press the Windows key Type SystemPropertiesAdvanced Click Run as administrator Click Settings Select the Advanced tab Select Change… Uncheck Automatically managing paging file size f...
Unable to allocate 1.86 GiB for an array with shape (25000, 10000) and data type float64
butebeizhanghao的博客
02-17 5886
Unable to allocate 1.86 GiB for an array with shape (25000, 10000) and data type float64 Ubuntu16.04系统TensorFlow 应该是创建的矩阵占用内存过载，导致系统阻断创建，若是用户可以以管理员身份登录终端，且可以接受创建矩阵所造成的内存过载的影响，可以在管理员身份的终端下输入如下命令： echo 1 > /proc/sys/vm/overcommit_memory ...
python报错
笔记照片批量处理【matlab】
05-24 1496
问题解决【1】 Unable to allocate 1.00 MiB for an array with shape (256, 256) and data type complex128 代表电脑CPU内存不够
nnunet Unable to allocate array with shape and data type
fanre的专栏
04-30 869
在进行validation的时候出现Unable to allocate array with shape and data type 其主要原因就是swap的大小不足 参照：https://blog.csdn.net/sabers_master/article/details/102530357 https://juejin.cn/post/6844903751505936397
神经网络作业问题（记录）
weixin_53481887的博客
04-09 1563
遇到的问题： MemoryError: Unable to allocate 1.86 GiB for an array with shape (25000, 10000) and data type float64 打开电脑设置
python 问题 Unable to allocate 41.8 GiB for an array with shape
04-22
这个错误表示试图在内存中分配一个非常大的数组，但是系统没有足够的内存来完成这个任务。 解决这个问题的方法是： 1.尽可能地减少数组的大小或需要的内存量 2.使用分块或分批处理来处理数据 3.尝试使用内存映射或磁盘缓存等技术来处理数据 4.增加系统内存或使用更高效的算法 5.如果无法解决问题，可以考虑使用云计算或分布式计算等技术来处理数据。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值