mysql 批量插入数据如何防止重复插入

原创已于 2022-10-10 15:09:40 修改 · 3.2k 阅读

8 ·

CC 4.0 BY-SA版权

文章标签：

#mysql #数据库 #java

于 2020-07-17 11:45:05 首次发布

MySql 专栏收录该内容

25 篇文章

订阅专栏

本文探讨了在MySQL中批量插入数据时遇到重复数据的问题，并提供了两种解决方案：一是通过创建联合唯一索引来预防重复，二是利用SQL语句的ON DUPLICATE KEY UPDATE特性来忽略或更新重复记录。

mysql批量插入数据时,会存在重复数据的可能.
解决方法:
1)数据库加联合索引
2)修改sql,忽略重复的数据,防止数据库报错
1.


CREATE TABLE `merchantBlackList` (
  `id` int(5) NOT NULL AUTO_INCREMENT,
  `createTime` datetime NOT NULL,
  `bankId` int(10) DEFAULT NULL COMMENT '银行id',
  `merchantSn` varchar(20) COLLATE utf8mb4_unicode_ci DEFAULT NULL COMMENT '商户编号',
  PRIMARY KEY (`id`),
  UNIQUE KEY `bankId_merchantSn` (`bankId`,`merchantSn`)//联合索引
) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;

<insert id="batchInsert"  parameterType="ArrayList">
        INSERT INTO merchantBlackList(createTime,bankId,merchantSn)
        VALUES
        <foreach collection="list" item="item" index="index" separator="," >
            (#{item.createTime},#{item.bankId},#{item.merchantSn})
        </foreach>
        ON DUPLICATE KEY UPDATE
        bankId=VALUES(bankId),
        merchantSn=VALUES(merchantSn);
    </insert>