记因PHP的内存溢出导致的事故之解决

本文通过实际案例,探讨了PHP脚本因内存溢出而执行失败的问题。文章详细分析了问题的原因,并提供了几种有效的解决方案,包括增加内存限制、分批处理数据等。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

如果对您有用记得关注,更多干货。

今天上午刚到公司,就有同事在公司群里反映某个计划任务出现问题了。我就怀着刨根问底的心,去查看了log。发现挺有意思的一个问题,PHP内存溢出导致脚本执行失败。那就一起来看个究竟吧!

  1. 首先查看了计划任务的Log

记因PHP的内存溢出导致的事故之解决

从报错信息字面意思可以看出,允许的134217728 bytes的内存已经用尽,还要试图分配12961640 bytes
内存。

给你(当前脚本)分配的内存你已经用完了,你还想问系统要内存。系统这时想对你说:

地主家也没有余粮啊(借用葛优大爷的一句话)

记因PHP的内存溢出导致的事故之解决

  1. 模拟一下"案发现场"

  • 新建一个mem_exhausted.php文件 copy过来一个2.4M的log文件做测试用

  • 写个简单的脚本重现"案发现场" 故意分配1M的内存 来读取2.4M的log

  • 执行脚本,"案发现场"重现

记因PHP的内存溢出导致的事故之解决

记因PHP的内存溢出导致的事故之解决

记因PHP的内存溢出导致的事故之解决

  1. 分析"事故"原因

    脚本一次性读取了大量的数据(可能是读的文件,可能是读取的数据库)

    如下图: 往杯子(分配给当前脚本的内存)里面倒数水(log文件的数据),杯子容量(内存)不够用

  2. 解决方案

    a. 既然杯子小 就换个大杯子(增大给脚本分配的内存)治标不治本: ini_set('memory_limit','100M');

记因PHP的内存溢出导致的事故之解决

记因PHP的内存溢出导致的事故之解决

b. 把水分批次倒入杯子中(循环,分段读取数据,读数据库的话可以用limit)

记因PHP的内存溢出导致的事故之解决

看看结果

记因PHP的内存溢出导致的事故之解决

分段读取也是可以解决问题滴

  1. 其他优化方案

    • 应当尽可能减少静态变量的使用,在需要数据重用时,可以考虑使用引用(&)。

    • 数据库操作完成后,要马上关闭连接;

    • 一个对象使用完,要及时调用析构函数(__destruct())

    • 用过的变量及时销毁(unset())掉

    • 可以使用memory_get_usage()函数,获取当前占用内存 根据当前使用的内存来调整程序

    • unset()函数只能在变量值占用内存空间超过256字节时才会释放内存空间。(PHP内核的gc垃圾回收机制决定)

    • 有当指向该变量的所有变量(如引用变量)都被销毁后,才会释放内存

      (PHP变量底层实现是一个_zval_struct结构体,is_ref__gc表示引用计数 is_ref__gc表示是否为引用)

出处:https://www.cnblogs.com/gaohj/p/6727069.html?utm_source=tuicool&utm_medium=referral

PHP原生处理大型Excel文件可能会遇到内存溢出的问题,这是因为一次性将所有数据加载到内存中可能导致内存消耗过大。为了解决这个问题,可以采用分块读取和写入的方式,结合PHPExcel或类似库如Spreadsheet_Excel_Writer这样的工具来逐行或逐列处理数据。 PHPExcel库允许你按需加载工作表的数据,而不是一次性全部加载。例如,你可以创建一个循环,每次只读取并处理一小部分数据,然后再写入到Excel文件中: ```php use PHPExcel_IOFactory; // 假设你有一个大数据集$data $chunkSize = 1000; // 每次处理的行数 for ($i = 0; $i < count($data); $i += $chunkSize) { $chunkData = array_slice($data, $i, $chunkSize); // 创建一个新的PHPExcel实例 $objPHPExcel = PHPExcel_IOFactory::createPHPExcelObject(); // 写入数据到工作表 foreach ($chunkData as $row) { $objPHPExcel->getActiveSheet()->setCellValueByColumnAndRow(0, $i / $chunkSize + 1, $row['column_name']); } // 将数据保存到临时文件,然后合并成最终文件 $tmpFile = tempnam(sys_get_temp_dir(), 'export'); $objPHPExcel->save($tmpFile); // 处理完一块后删除临时文件,释放内存 unlink($tmpFile); } // 最后将所有的临时文件合并成一个完整的Excel文件 $finalFile = 'output.xlsx'; PHPExcel_IOFactory::load('tempfile1.xlsx')->mergeCells('A1:A' . (count($data) / $chunkSize + 1)); // ...重复此过程,将其他临时文件合并 PHPExcel_IOFactory::save($finalFile); ``` 使用这种方法可以避免内存溢出,并且能够处理非常大的数据集。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值