使用celery定时任务将MySQL数据同步到MongoDB时报错2006与2013 原因分析

在Flask项目中,使用Celery+RabbitMQ定时从MySQL同步数据到MongoDB时遇到2006和2013错误。问题源于MySQL的wait_timeout和peewee的stale_timeout设置。当超过stale_timeout而没有web请求时,数据库连接不会被关闭。解决方案包括使用上下文管理器确保连接关闭,或在定时任务中直接使用原生连接。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

场景

在Flask项目中使用peewee扩展playhouse中的PooledMySQLDatabase 连接MySQL数据库 =>

from playhouse.pool import PooledMySQLDatabase

使用celery+rabbitmq做定时任务,每15分钟将数据从MySQL同步到MongoDB。启动服务、rabbitmq、celery定时任务,使用flower监控。数分钟后,任务执行失败,错误信息 Error 2006:MySQL server has gone away;Error 2013:Lost connection to MySQL server during query

参数设置

MySQL Server:wait_timeout(以前版本的Connection Lifetime)= 28800(8个小时,默认配置),

peewee(PooledMySQLDatabase):stale_timeout=600, max_connections=32(其余参数使用默认值)

wait_timeout官方定义如下:

The number of seconds the server waits for activity on a noninteractive connection before closing it.

On thread startup, the session wait_t

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值