MYSQL_ATTR_USE_BUFFERED_QUERY不能更新数据

在PHP中,使用PDO更新大量数据时,默认的缓冲查询可能导致内存溢出。通过设置PDO::MYSQL_ATTR_USE_BUFFERED_QUERY为false可禁用缓冲,但这样会导致UPDATE操作失败。为解决此问题,可以使用两个不同的连接,一个用于无缓存读取,另一个用于带缓冲写入。同时避免使用持久连接,以防两个连接共享同一设置,导致更新错误。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

用php更新大量数据,pdo默认会缓存数据,也就是说把数据全部读入内存后再fetch。当数据量很大的时候,会导致内存溢出。

所以这种情况下,我们需要用下面的语句来禁止缓存

$dbh->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); 

但是今天发现,禁止缓存后执行update就会失败,没有找到官方文档。

这种情况下,我想了一个办法,使用2个连接,一个用于无缓存读数据,一个用于有缓存写数据,这样解决了大数据更新的问题,在这里分享一下。

<?php

$dbh = new PDO(
    "mysql:dbname=media;host=192.168.100.28",
    "xxx", 
    "xxx",
    array(PDO::MYSQL_ATTR_INIT_COMMAND => "SET NAMES 'utf8'")
);
$dbh2 = new PDO(
    "mysql:dbname=media;host=192.168.100.28",
    "xxx", 
    "xxx",
    array(PDO::MYSQL_ATTR_INIT_COMMAND => "SET NAMES 'utf8'")
);
$dbh->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); 

$sql = <<<EOF
SELECT
	ID,URL
FROM
    mm_detail
EOF;
$sql2 = <<<EOF
UPDATE
    mm_detail
SET
    SEARCH_UNIQUE_URL=:SEARCH_UNIQUE_URL
WHERE
    ID=:ID 
EOF;
$sth = $dbh->prepare($sql, array(PDO::ATTR_CURSOR => PDO::CURSOR_FWDONLY));
$sth2 = $dbh2->prepare($sql2, array(PDO::ATTR_CURSOR => PDO::CURSOR_FWDONLY));
$sth->execute();
    
    while( $row = $sth->fetch(PDO::FETCH_OBJ) ){
        $unique_url = get_unique_url($row->URL);
        echo $unique_url."\n";
        $rt=$sth2->execute(array(':ID' => $row->ID,':SEARCH_UNIQUE_URL' => $unique_url));
        echo "----$rt-----------";
    }
   

注意:不要设置连接持久化PDO::ATTR_PERSISTENT => true,否则2个连接实际上是共享一个连接,设置第一连接为无缓存会在第二个连接里面也生效,导致update失败。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值