由于列表中存在相同实例导致insert_many报错解决办法

micromicrofat

于 2021-05-26 15:47:59 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： MongoDB Python 文章标签： pymongo mongodb python 深拷贝浅拷贝

本文链接：https://blog.youkuaiyun.com/MacwinWin/article/details/117293312

Python 同时被 2 个专栏收录

180 篇文章

订阅专栏

MongoDB

13 篇文章

订阅专栏

在尝试使用`insert_many`方法批量插入MongoDB文档时，遇到了`pymongo.errors.BulkWriteError`，原因是列表中存在重复实例导致。问题在于使用列表乘法操作创建新列表时，某些元素实际上是同一个实例。解决方法是避免使用列表乘法，而是采用深拷贝确保每个元素都是独立的实例。例如，使用`copy.deepcopy()`来扩展列表，而不是`list.extend()`或浅拷贝。这样做可以确保所有插入的文档都是独特的，从而避免错误。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在使用insert_many对mongodb进行多文档插入时报错

pymongo.errors.BulkWriteError: batch op errors occurred

但奇怪的是这样没问题

>>> mycol.insert_many(documents=[{'a':1},{'a':1},{'a':1},{'a':1},{'a':1},{'a':1},{'a':1},{'a':1},{'a':1}])

下面这样就会报错

>>> pool1 = [{'a':1},{'a':1},{'a':1}]
>>> pool0 = pool1 * 3
>>> mycol.insert_many(documents=pool0)

打印出列表中每个元素的id：

In [5]: id(pool0[0])
Out[5]: 4551175744

In [6]: id(pool0[1])
Out[6]: 4550162624

In [7]: id(pool0[3])
Out[7]: 4551175744

In [8]: id(pool0[4])
Out[8]: 4550162624

可以发现pool0[0]和pool0[3]的id一样，也就是说这两个是一个实例，所以报错了
解决办法就是不要出现list乘数字的方式,list.extend()方式亦会出现相同实例的问题

用深拷贝的方式能够解决问题

>>> import copy
>>> pool0.extend(copy.deepcopy(pool1))

注意：以下方式亦会出现相同实例，不要使用

>>> import copy
>>> pool0 = copy.deepcopy(pool1) * 3

# 浅拷贝
>>> pool0.extend(pool1.copy())

参考：
https://blog.youkuaiyun.com/u010099495/article/details/50276833
https://stackoverflow.com/a/42389548/7151777