Python进阶(三十一)-往MySQL数据库里添加数据，update和insert哪个效率高

最新推荐文章于 2025-06-19 17:13:25 发布
原创 最新推荐文章于 2025-06-19 17:13:25 发布 · 2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文探讨在Python中向MySQL数据库添加数据时，update和insert的效率问题。通过分析网络观点，指出在特定条件下update可能更高效。讨论了影响效率的因素，如存储引擎、索引、插入方式，并提出批量插入和事务处理作为优化手段。同时建议在大数据量更新时考虑异步操作。

分享一下我的偶像大神的人工智能教程！http://blog.youkuaiyun.com/jiangjunshow

也欢迎转载我的文章，转载请注明出处 https://blog.youkuaiyun.com/mm2zzyzzp

Python进阶(三十一)-往MySQL数据库里添加数据，update和insert哪个效率高

  在编写“Water Spider”过程中，遇到了批量更新数据的情况。自己刚开始时想使用mysql提供的cursor.executemany(operation, seq_of_params)方法执行批量更新操作，但是在写sql语句时遇到了问题，不知道如何写了。
  后来换种思路，考虑在执行数据插入之前先做数据表删除操作，然后再执行写入操作。因为自己臆想的是“数据插入的效率应该优于更细的效率。”因此，决定对于该问题进行实际考察。
  下面总结一下网络上针对该问题大家给出的观点
  1. “不考虑主键变动，索引变动，触发器联动的情况下，update比Insert效率高。”
  2. 这个很难说，相关因素太多了：存储引擎类型、是否加索引（索引结构如B+树索引或者哈希索引、索引更新、聚集索引还是非聚集索引）、约束（如唯一性约束、外键约束等）…
  还有提下三种插入语句（也有可能影响插

最低0.47元/天 解锁文章

200万优质内容无限畅学
孙华强1
关注
mybatis如何高效插入
fengzelun的博客
07-30 1283
一、思路 1.java代码分页插入 2.mybatis批量插入 3.如果需要判断“存在则不插入”使用 insert ignore into 替代 select * from dual where not exists 二、ignore和where not exists效率 同等条件下（电脑处理时稍微有些误差），ignore比where not exists快40s ignore执行时间 where not exists执..
python提高mysql数据库插入数据效率
qq_37341324的博客
04-23 2451
python提高mysql数据库插入数据效率 1、insert的时候尽量多条一起插，不要单条插。这样可以减少日志量，降低日志刷盘数据量和频率，效率提高很多。 2、在事务中进行插入。也就是每次部分commit，否则每条insert commit 创建事务的消耗也是不小的。 3、 数据插入的时候保持有序。比如Innodb用的是B+树索引，对B+树的插入如果是在索引中间就会需要树节点分裂合并，这也会有一定的消耗。 修改前： #!/usr/bin/python3 # -*- coding: utf-8 -*- #
Python进阶(三十一)往MySQL数据库里添加数据，update和insert效率分析
IT全栈 华强工作室
04-06 5万+
因为自己臆想的是“数据插入的效率应该优于更新效率。的设计目标是处理大容量数据库系统，它的 CPU 利用率是其它基于磁盘的关系数据库引擎所不能比的。对于这种大数据量的更新情况，可以采用多线程的方式，每个线程更新100条数据，这样就能提高更新的速度了。insert ignore表示，如果表中如果已经存在相同的记录，则忽略当前新数据。，或者唯一索引，如果表中已经存在数据，则用新数据替换，如果没有数据效果则和。对于大数据量的更新一般会做成一个异步的操作，而不需要是实时的。这个操作的返回是实时的吗？
收集了一些用python做mysql增删改查的资料
最新发布
weixin_42988262的博客
06-19 729
本文介绍了在FastAPI应用中通过PyMySQL和DBUtils实现MySQL数据库连接池的方法。主要内容包括：1)搭建Python3.9环境并安装PyMySQL；2)创建MySQL测试表和基础CRUD操作；3)使用DBUtils的PooledDB创建线程安全的连接池；4)整合FastAPI路由实现数据存储接口。作者分享了配置过程中遇到的问题和解决方案，如连接数监控、DB-API2标准适配等，并提供了官方文档和AI辅助学习的心得。虽然实现基本功能，但作者表示对连接池底层机制仍需深入研究。
提高数据更新效率(UPDATE/INSERT)
dolphin_ygj
08-04 1571
有多种方法可以提高更新的效率.简单说来：１、暂停索引，更新后恢复.避免在更新的过程中涉及到索引的重建.２、批量更新，每更新一些记录后及时进行提交动作.避免大量占用回滚段和或临时表空间.３、创建一临时的大的表空间用来应对这些更新动作．=========================================================================不同看法如果UPDAT...
Python操作数据库之insert、update
R
01-18 1408
1、链接数据库 import pymysql db = pymysql.connect(host='localhost', user='root', password='123456', port=3306, db='spiders') cursor = db.cursor() sql = 'select * from students;' cursor.execute(sql) curso...
Python进阶编程 --- 2.MySQL、pymysql、PySpark
zhongziqia的博客
04-15 2026
SQL：结构化查询语言，用于访问和处理数据库的标准的计算机语言。
03 Python进阶：MySQL - mysql-connector
热门推荐
百锦再的博客
04-03 5万+
在 Python 中使用 MySQL Connector/Python 创建数据表的方法与在 MySQL 命令行中创建数据表的方法类似。要在 Python 中使用 MySQL 数据库，你需要安装 MySQL 官方提供的 MySQL Connector/Python。要在 Python 中进行带有条件的查询，只需在 SQL 查询语句中添加条件即可。首先，确保你已经安装了 Python，如果没有安装，可以在 Python 官网（https://www.python.org）下载并安装最新版本的 Python。
python-03-登录和退出MySQL数据库.ev4.rar
05-28
在Python编程中，MySQL数据库是常用的数据库管理系统，用于存储和管理数据。本教程"python-03-登录和退出MySQL数据库.ev4"将详细介绍如何使用Python连接、操作以及退出MySQL数据库。以下是关于这个主题的详细知识点...
04 Python进阶：MySQL-PyMySQL
百锦再的博客
04-03 4万+
PyMySQL 是一个用于 Python 的纯 Python MySQL 客户端库，提供了与 MySQL 数据库进行交互的功能。PyMySQL 允许 Python 开发人员连接到 MySQL 数据库服务器，并执行诸如查询、插入、更新和删除等数据库操作。PyMySQL 是用纯 Python 编写的 MySQL 客户端库，不依赖于 MySQL C 驱动，因此可以在不同的平台上轻松安装和使用。
Python 生成sql insert or update none值替换为Null值
zengjon的博客
08-30 3104
Python写入none值到mysql 数据库
UPDATE or INSERT?
肥三的专栏
04-19 6267
很多时候我们会碰到这样的需求：要往数据表里记录一些数据，如果这些数据是第一次记录，那么要执行INSERT操作，如果以前记录过了，那就指向UPDATE操作。最直接的处理方法，就是先SELECT查询一次，看该条数据是否已经存在，如果已存在就UPDATE，如果不存在就INSERT。这种处理的缺点是，不管怎样，都要先查询一次。昨天看the art of sql，提到了一种处理方式，先直接UPDAT
Python对MySQL进行update之后必须要commit，数据库的数据操作才会真正生效
qq_31239371的博客
12-11 2902
今天上午在尝试使用Python中的pymysql模块来进行数据库的insert操作，但每次代码返回已经更新成功，可数据库中就是没有出现相应的数据，一直没有找到错误的原因，很郁闷。后来在网上到处搜索，总算有了一点头绪，在此记录下来。 首先贴上我的代码： import pymysql conn = pymysql.connect(host="*.*.*.*",port=***,user="**...
20w条数据MySQL速度_有20万条数据,使用mysql数据库,insert与update哪个速度快；
weixin_31155097的博客
01-18 1917
展开全部insert会更快一点，可以使用 INSERT INTO SELECT FROM < source_table> 高效地将大量行从一个表(例如临时表)。传输到按62616964757a686964616fe4b893e5b19e31333431363637最小方式记录日志的其他表中。按最小方式记录日志可以提高语句的性能，减少在事务期间此操作填充可用事务日志空间的可能性。IN...
mysql create insert,python中Mysql的create,insert,update,fetchall,fetchone一些简单操作
weixin_42551227的博客
03-17 221
“”“比较常用的参数包括:host:数据库主机名.默认是用本地主机user:数据库登陆名.默认是当前用户passwd:数据库登陆的秘密.默认为空db:要使用的数据库名.没有默认值port:MySQL服务使用的TCP端口.默认是3306charset:数据库编码conn=MySQLdb.connect(host="localhost",user="root",passwd="xxxx",db="te...
oracle undo表空间与redo日志
weixin_34062469的博客
03-29 484
undo表空间与redo日志文件在oracle中的作用非常重要，本文重点介绍undo回滚段的作用与特点，同时简单介绍undo与redo的区别和各自己的作用： 一.undo中数据的特点： 1。是数据修改前的备份，主要是保证用户的读一致性 2. 在事务修改数据时产生 3。至少保存到事务结束 二。undo数据的作用： 1.回滚(rollback)操作 2.实现读一...
insert和update的一些性能对比测试
杨建荣的学习笔记
03-29 3183
这是学习笔记的第1933篇文章 今天在做中间件的测试时，突然想到之前的一些思路也可以借鉴一下，这块的内容还是比较有意思，简单剧透一下，如何把drop操作转换为alt...
mysql delte_[转载]MySQL的insert、replace和update语句执行效率
weixin_33557333的博客
01-27 767
测试insert、replace和update语句执行效率测试程序#include #include #include #include #include #include "/usr/local/include/mysql/mysql.h"using namespace std;MYSQL mysql;void exiterr(int exitcode){printf("%sn", mysql_...
MySQL-python-1.2.3M：Python连接MySQL数据库的依赖包
MySQL-python-1.2.3M 是一个用于在 Python 环境中连接和操作 MySQL 数据库的软件包。这个包本质上是一个 Python 的数据库接口模块，它允许开发者在 Python 应用程序中执行 SQL 查询、操作数据库结构以及管理数据。该...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值