MySQL 批量插入,如何不插入重复数据

本文介绍了MySQL在处理数据插入时的几种策略,包括INSERT IGNORE、ON DUPLICATE KEY UPDATE、INSERT...SELECT...WHERE NOT EXISTS和REPLACE INTO,详细解释了它们的工作原理和适用场景。特别提到了在Mybatis中批量插入数据的例子,利用ON DUPLICATE KEY UPDATE避免了手机号重复插入的问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、insert ignore into

当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回。所以使用ignore请确保语句本身没有问题,否则也会被忽略掉。例如:

INSERT IGNORE INTO user (name) VALUES ('telami') 

这种方法很简便,但是有一种可能,就是插入不是因为重复数据报错,而是因为其他原因报错的,也同样被忽略了~

2、on duplicate key update

当primary或者unique重复时,则执行update语句,如update后为无用语句,如id=id,则同1功能相同,但错误不会被忽略掉。
例如,为了实现name重复的数据插入不报错,可使用一下语句:

INSERT INTO user (name) VALUES ('telami') ON duplicate KEY UPDATE id = id 

这种方法有个前提条件,就是,需要插入的约束,需要是主键或者唯一约束(在你的业务中那个要作为唯一的判断就将那个字段设置为唯一约束也就是unique key)。

3、insert … select … where not exist

根据select的条件判断是否插入,可以不光通过primary 和unique来判断,也可通过其它条件。例如:

INSERT INTO user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 

这种方法其实就是使用了mysql的一个临时表的方式,但是里面使用到了子查询,效率也会有一点点影响,如果能使用上面的就不使用这个。
4、replace into

如果存在primary or unique相同的记录,则先删除掉。再插入新记录。

REPLACE INTO user SELECT 1, 'telami' FROM books 

这种方法就是不管原来有没有相同的记录,都会先删除掉然后再插入。另外,关注公众号Java技术栈,在后台回复:面试,可以获取我整理的 MySQL 面试题和答案。
实践

选择的是第二种方式

<insert id="batchSaveUser" parameterType="list">
    insert into user (id,username,mobile_number)
    values
    <foreach collection="list" item="item" index="index" separator=",">
        (
            #{item.id},
            #{item.username},
            #{item.mobileNumber}
        )
    </foreach>
    ON duplicate KEY UPDATE id = id
</insert>

这里用的是Mybatis,批量插入的一个操作,mobile_number已经加了唯一约束。这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

在C#中使用MySql进行批量插入重复数据,可以通过以下步骤实现: 1. 首先,你需要连接到MySql数据库。你可以使用MySql.Data.MySqlClient命名空间中的MySqlConnection类来建立连接。例如: ```csharp string connectionString = "your_connection_string"; using (MySqlConnection connection = new MySqlConnection(connectionString)) { connection.Open(); // 执行插入操作 } ``` 2. 接下来,你需要准备要插入的数据。你可以使用INSERT INTO语句来插入数据,同时使用ON DUPLICATE KEY UPDATE子句来处理重复数据。这样,当插入的数据已经存在时,将会更新已存在的数据。例如: ```csharp string insertQuery = "INSERT INTO your_table (column1, column2) VALUES (@value1, @value2) ON DUPLICATE KEY UPDATE column1 = @value1"; using (MySqlCommand command = new MySqlCommand(insertQuery, connection)) { // 设置参数值 command.Parameters.AddWithValue("@value1", value1); command.Parameters.AddWithValue("@value2", value2); // 执行插入操作 command.ExecuteNonQuery(); } ``` 3. 最后,你可以使用循环来批量插入多条数据。例如: ```csharp List<Data> dataList = new List<Data>(); // 假设你有一个包含要插入的数据的列表 foreach (Data data in dataList) { using (MySqlCommand command = new MySqlCommand(insertQuery, connection)) { // 设置参数值 command.Parameters.AddWithValue("@value1", data.Value1); command.Parameters.AddWithValue("@value2", data.Value2); // 执行插入操作 command.ExecuteNonQuery(); } } ``` 这样,你就可以使用C#和MySql实现批量插入重复数据了。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值