pymongo.errors.CursorNotFound: Cursor not found 原因+解决办法-优快云博客

本文链接：https://blog.youkuaiyun.com/manduner/article/details/100017047

本文针对在处理千万级别数据时遇到的MongoDB游标超时问题，提供了两种解决方案：一是设置no_cursor_timeout参数防止游标自动关闭；二是结合使用batch_size参数减少内存消耗，适用于数据处理模块耗时较长的情况。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1，原因

一般情况下，工程上需要处理的数量比较大，比如我常处理的数据记录常常在千万级别以上。出现以上问题的原因就是：

和数据规模有关，
也和对该大规模的数据处理有关。

我出现的问题的代码如下，其中dataprocess()函数耗时较长

import pymongo
client = pymongo.MongoClient()
db = client['db_name']
col = db['col_name']

for item in col.find():
	#dataprocess表示比较耗时的数据处理模块
	dataprocess(item)

2，解决办法

方法一：为find() 函数设置 no_cursor_timeout = True，表示游标连接不会主动关闭（需要手动关闭）

import pymongo
client = pymongo.MongoClient()
db = client['db_name']
col = db['col_name']
cur = col.find(no_cursor_timeout = True)
for item in cur:
	#dataprocess表示比较耗时的数据处理模块
	dataprocess(item)
cur.close()

方法二：如果使用了方法一之后还出现报错，可以继续为find()函数设置batch_size参数，不过也说明数据处理模块也太耗时了，可以检查下数据处理模块的代码是否有问题。。。。

import pymongo
client = pymongo.MongoClient()
db = client['db_name']
col = db['col_name']
cur = col.find(no_cursor_timeout = True, batch_size = 5)
for item in cur:
	#dataprocess表示比较耗时的数据处理模块
	dataprocess(item)
cur.close()