Mysql批量插入数据时如何解决重复问题?

本文详细介绍了在MySQL中,面对主键或唯一键冲突时,如何使用`INSERT IGNORE`,`REPLACE INTO`和`INSERT INTO ... ON DUPLICATE KEY UPDATE`三种方法进行数据批量插入,以避免重复数据。每种方法在主键和唯一键冲突情况下的具体行为进行了实例演示和分析,提醒在唯一键冲突时使用这些方法需谨慎。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

本文内容仅在 MariaDB-10.2.15 版本下验证,其它环境下可能略有差异。

当数据库中存量数据较多时,或者是在批量插入操作时,很容易出现插入重复数据的问题。

一、三种方法

在 mysql 中,当存在主键冲突或唯一键冲突的情况下,根据插入策略不同,一般有以下三种避免方法:

  • insert ignore into:若没有则插入,若存在则忽略
  • replace into:若没有则正常插入,若存在则先删除后插入
  • insert into ... on duplicate key update:若没有则正常插入,若存在则更新

注意,使用以上方法的前提是表中有一个 PRIMARY KEYUNIQUE 约束/索引,否则,使用以上三个语句没有特殊意义,与使用单纯的 INSERT INTO 效果相同。

在具体介绍三种方法的使用方式之前,均使用如下语句初始化表数据:

"-- 创建表 ljtest --"
CREATE TABLE IF NOT EXISTS ljtest (
id INT(11) NOT NULL PRIMARY KEY AUTO_INCREMENT,  -- 自增主键 id
emp_no INT(11) NOT NULL,
title VARCHAR(50) NOT NULL,
from_date DATE NOT NULL,
to_date DATE DEFAULT NULL)ENGINE=INNODB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8;

"-- 插入三条数据 --"
INSERT INTO ljtest VALUES 
('1', '10001', 'Senior Engineer', '1986-06-26', '9999-01-01'),
('2', '10002', 'Staff', '1996-08-03', '9999-01-01'),
('3', '10003', 'Senior Engineer', '1995-12-03', '9999-01-01'),

"-- 查看表数据 --"
select * from ljtest;
+----+--------+-----------------+------------+------------+
| id | emp_no | title           | from_date  | to_date    |
+----+--------+-----------------+------------+------------+
|  1 |  10001 | Senior Engineer | 1986-06-26 | 9999-01-01 |
|  2 |  10002 | Staff           | 1996-08-03 | 9999-01-01 |
|  3 |  10003 | Senior Engineer | 1995-12-03 | 9999-01-01 |
+----+----
在C#中使用MySql进行批量插入重复数据,可以通过以下步骤实现: 1. 首先,你需要连接到MySql数据库。你可以使用MySql.Data.MySqlClient命名空间中的MySqlConnection类来建立连接。例如: ```csharp string connectionString = "your_connection_string"; using (MySqlConnection connection = new MySqlConnection(connectionString)) { connection.Open(); // 执行插入操作 } ``` 2. 接下来,你需要准备要插入数据。你可以使用INSERT INTO语句来插入数据,同使用ON DUPLICATE KEY UPDATE子句来处理重复数据。这样,当插入数据已经存在,将会更新已存在的数据。例如: ```csharp string insertQuery = "INSERT INTO your_table (column1, column2) VALUES (@value1, @value2) ON DUPLICATE KEY UPDATE column1 = @value1"; using (MySqlCommand command = new MySqlCommand(insertQuery, connection)) { // 设置参数值 command.Parameters.AddWithValue("@value1", value1); command.Parameters.AddWithValue("@value2", value2); // 执行插入操作 command.ExecuteNonQuery(); } ``` 3. 最后,你可以使用循环来批量插入多条数据。例如: ```csharp List<Data> dataList = new List<Data>(); // 假设你有一个包含要插入数据的列表 foreach (Data data in dataList) { using (MySqlCommand command = new MySqlCommand(insertQuery, connection)) { // 设置参数值 command.Parameters.AddWithValue("@value1", data.Value1); command.Parameters.AddWithValue("@value2", data.Value2); // 执行插入操作 command.ExecuteNonQuery(); } } ``` 这样,你就可以使用C#和MySql实现批量插入重复数据了。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值