PHP 导出数据导致内存溢出

最新推荐文章于 2024-08-20 16:06:52 发布
原创 最新推荐文章于 2024-08-20 16:06:52 发布 · 1.3k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#php

本文介绍了在PHP中处理大量数据导出时遇到的内存溢出问题，提供了解决方案，包括调整php.ini配置中的`memory_limit`、在代码中动态修改内存限制，以及使用PHP的生成器`yield`来分批处理数据，从而有效防止内存耗尽。

Allowed memory size of xxx bytes exhausted

问题描述

当一次获取大量数据的时候，导致php的内存溢出。
准确的说，是超出了php.ini文件设置的脚本可能消耗的最大内存量。如下图
在这里插入图片描述

解决方法

修改php.ini文件对应的配置项

上图 memory_limit = 128M 就是 脚本可能消耗的最大内存量，可以适当加大这个值。

代码中动态修改这个值的大小

另外你可能还要设置脚本的超时时间来配合使用。

set_time_limit(0);//设置脚本执行时间 不超时
ini_set('memory_limit', '512M'
最低0.47元/天 解锁文章
使用phpspreadsheet导出数据时内存溢出处理
x554462的博客
04-08 7235
使用phpspreadsheet进行导出excel的时候遇到了内存溢出的问题，官方提供了memory saving的解决方案，官方文档中提供了APCu、redis和memcache的缓存方案，但是在这些缓存方案都需要安装相应的扩展并且都为内存型缓存，数据量一大的话就会大大占用系统的内存，可能会影响项目的正常运行的，于是就自行实现了一种文件缓存的方式，实测可以减少导excel表时一半的内存使用量，在...
phpspreadsheet内存溢出解决方案
托塔天王的博客
01-24 1498
官方使用了ChunkReadFilter来进行读取. 但是在使用过程中. 发现只能优化掉一部分. 当读取的单元格原来越多时. 内存一样抗不住了. 所以有了我们后面一种方式.2022-01-10近期，由于工作业务中，需要 同步一份xlsx的数据传到一台服务器中并做解析操作. 我们php也就用了spreadsheet这个扩展.读取指定的工作表. 使用setLoadSheetsOnly来处理. 例如。在spreadsheet官网中, 有这样一份方案. 分段读取.这样也能解决掉一部分.
phpExcel导出大量数据出现内存溢出错误的解决方法
10-27
我们经常会使用phpExcel导入或导入xls文件，但是如果一次导出数据比较大就会出现内存溢出错误,下面我来总结解决办法
php 导出时内存溢出,phpExcel导出大量数据出现内存溢出错误的解决方法
weixin_28917223的博客
03-29 531
phpExcel将读取的单元格信息保存在内存中，我们可以通过复制代码 代码如下:PHPExcel_Settings::setCacheStorageMethod()来设置不同的缓存方式，已达到降低内存消耗的目的！1、将单元格数据序列化后保存在内存中复制代码 代码如下:PHPExcel_CachedObjectStorageFactory::cache_in_memory_serialized;2、...
如何解决PHP里大量数据循环时内存耗尽的问题
weixin_34265814的博客
07-08 542
为什么80%的码农都做不了架构师？>>> ...
关于PHP内存溢出问题的解决方法
12-19
然而，当数据量增大，如第二个例子，垃圾回收器可能会在`unset()`后运行，从而导致内存使用量的下降。 了解这一点对优化PHP程序非常重要，因为过度依赖`unset()`来管理内存可能会导致误解。在处理大数据量时，更...
laravel 大数据分块导出，避免内存溢出
最新发布
m0_37678007的博客
08-20 645
数据来源：服务层（userService.php）导出类：SignContractExport。控制器：UserController。业务层：UserService。
php mysql 溢出_php导致内存溢出
weixin_35728049的博客
01-28 266
在执行一个导出csv脚步时，当要导出的数据超过3w多条时，就会报错，如下：Allowed memory size of 134217728 bytes exhausted (tried to allocate 20480 bytes)php存储3w多条数据这个数组占用内存超过20M解决方法：分批取数据，分批处理数据问题点：一次取多少数据最合适一次取1w条，减少数据库IO操作次数，但php数组就好较...
Thinkphp解决phpExcel导出数据量大导致内存溢出
weixin_30425949的博客
09-25 1138
工作需要导出几万的数据量。操作比较频繁。之前数据在七八千是数据导出很慢。phpExcel是方便但是性能一般。现在改为使用csv导出数据；可以缓解内存压力，一次导出两三万是没问题的。当然服务器内存给力，加上数据库优化相信这个还是比较方便的。 具体方法如下： 在Think文件下新建Csv.class,php <?php namespace Think; class Csv { ...
PHP内存溢出的原因和解决方案
Oona_01的博客
06-30 280
在开发和执行PHP代码时,开发者常常会面临一些常见的问题之一——内存溢出,本文将深入探讨PHP内存溢出的原因、影响以及解决方案,并提供一些实际的代码,需要的朋友可以参考下。在实际开发中，结合具体场景和需求，选择合适的解决方案，是确保PHP应用程序稳定性的关键一步。在上述例子中，$parent和$child相互引用，形成循环引用，可能导致垃圾收集无法正确释放内存。在递归函数中，如果没有正确的终止条件或者递归深度过大，可能会导致堆栈溢出，从而引起内存溢出。在使用对象引用时，确保不存在循环引用的情况。
phpspreadsheet读取大批量数据时内存溢出解决办法
test_appletwo的博客
03-30 2660
需求：一次性读取几万条excel数据并保存到数据库中 问题：当excel超过五万条时内存溢出，程序直接停止 解决办法：将表格切割成多个csv文件，每次只读取一部分数据，大大缓解服务器内存压力，缺点是处理时间会变长，适用于对时间要求不是很高的场景。 建议：小于两万五千条时phpspreadsheet直接读取，大于时采取分割法，下边只附分割法的代码 /** * 预读过滤类 * @author wangyelou * @date 2018-07-30 */ class MyAheadreadFi
php大量数据 10M数据从查询到下载 【内存溢出，查询过慢】解决方案
weixin_30919429的博客
06-14 335
功能描述：做数据导出 功能分析：1.采用csv的格式,因为csv的格式比excel小 　　　　　2. 3W条数据，100个字段需要全部导出 开始 直接查询 //此处使用的laravel框架，具体含义一看就懂 tableModel::orderby("id","asc")->get()->toArray(); 为什么会执行这么长时间？还没有返回结果 猜测出...
华纳云：php内存溢出报错的原因是什么及怎么解决
YOKEhn的博客
04-07 1564
而内存溢出错误则指出现了内存溢出的情况，同时给出了内存限制和在哪个 PHP 文件的哪一行代码触发了内存溢出。今天小编给大家分享一下php内存溢出报错的原因是什么及怎么解决的相关知识点，内容详细，逻辑清晰，相信大部分人都还太了解这方面的知识，所以分享这篇文章给大家参考一下，希望大家阅读完这篇文章后有所收获，下面我们一起来了解一下吧。以上原因只是其中的一部分，针对不同的业务场景和具体情况，可能有其它的原因导致内存溢出错误。
php 导出大数据量excel 解决方法 秒出 并不会出现PHPExcel内存溢出问题
qq_21193711的博客
04-03 1541
最近公司需要每天生成亚马逊广告调价报告报表 并且文件格式必须为excel 数据量超过10w+ 使用PHPExcel组件 加上生成器yield 并且设置单元格对象缓存 还是会导致内存爆掉 最后使用了PHP_XLSXWriter 轻量级组件 直接解决内存问题 数据秒出 先介绍一下PHP_XLSXWrite 再贴代码 PHP_XLSXWriter 是一个小而强悍的 Excel 读写插件...
php流导出excel内存溢出,phpExcel导出大量数据出现内存溢出错误解决办法
weixin_35909141的博客
03-17 833
我们经常会使用phpExcel导入或导入xls文件，但是如果一次导出数据比较大就会出现内存溢出错误,下面我来总结解决办法。phpExcel将读取的单元格信息保存在内存中，我们可以通过代码如下复制代码PHPExcel_Settings::setCacheStorageMethod()来设置不同的缓存方式，已达到降低内存消耗的目的！1、将单元格数据序列化后保存在内存中代码如下复制代码PHPExcel_...
PhpSpreadsheet导入导出超出24列时
XiongAshao的博客
05-19 439
1 导入时候 public function batchImport(){ $params = request()->param(); //获取表格的大小，限制上传表格的大小5M $file_size = $_FILES['myfile']['size']; if ($file_size > 5 * 1024 * 1024) { $this->return_format('1001','文件大小不能超过5M'); exit(); } //限制上
php导出数据内存溢出
06-10
PHP导出大量数据时，可能会出现内存溢出的问题。这是因为PHP的内存限制可能会限制脚本的可用内存，导致脚本无法处理大量数据。为了解决这个问题，可以采取以下措施： 1. 增加PHP的内存限制。在PHP脚本的开头添加...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值