解决项目中主键重复无法插入数据的问题

最新推荐文章于 2022-06-24 18:45:26 发布
原创 最新推荐文章于 2022-06-24 18:45:26 发布 · 1.1k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#数据结构 #DB2 #SQL #Cache

本文详细描述了如何解决数据库中自增ID导入冲突的问题，包括修改表结构、使用SQL命令调整自增序列的起始值等方法，并讨论了不同场景下的优缺点。
出现此问题是由于这样：表中之前有一些插入的数据，后期经别人导入数据，再次导入数据时出现如下问题：[img]http://dl.iteye.com/upload/picture/pic/69756/b3bc6f5a-6825-3d28-8f0a-d2dc80884489.jpg[/img]。
初步分析，是由于导入数据时，导入了自增的id，而数据库中自增的id始终停留在原始的那个值。印象中，小李同学曾经解决过此问题，是将开始自增的值由现在最大的值+1，即可解决。但苦于自己不是专业的数据库人员，也没有系统学习过这方面的知识。于是，先找了邱同学帮我解决。首先确定了确实是由于上述的情况造成的，则修改了表结构中自增字段的最小开始值，生成代码，然后开始commit。发现此处需要将数据先备份出来，然后再插入数据，才能解决此问题。如果数据库中数据量不大的情况下，这种解决办法还是可以的。但数据量大的情况下，光是导入数据就会很长时间。看来这不是最好的解决办法。于是乎，让系统慢慢的导数据。另外思考，db2应该会提供这种修改自增值开始的方法。于是我们继续查询资料。
经查找，找到如下资料：
[color=red] 对于自增序列(GENERATED by default）
　　GENERATED by default可以直接通过一般的导入方式加载数据，不过有时候会有一点点小问题，自增序列没有进行分配，也就是说，原来表有50条记录，自增序列的下一次分配值为50，当你已经导入了1000条记录进去了，然后发现自增序列的下一次分配值还是为50，这种事不经常发生，但是偶尔会发生一次，比较郁闷的是，当表继续插入数据的时候，下一次分配就会发生冲突，尤其是如果自增建为主键的时候，会违反唯一约束。

　　解决办法：首先找到这个序列分配的最大值，select max(id) from tablea;

　　然后用下边这个命令，alter table tablea alter column restart with max(id)+1[/color]
哈哈，终于找到这种解决办法。速度应该会比上一种解决办法快很对了吧。至少不用再次的插入数据。于是在下一张表中再次出现此问题时，使用如下的sql语句，“alter table QUESTIONNAIRE_RUBRIC_CL1 alter column RUBRIC_INST_ID SET GENERATED ALWAYS restart with 210;”，此语句一执行，那个速度真是超赞哦。看来以后再出现此种情况，就照此方法解决了。
另外，在测试自增id是否连续自增时，发现id虽然是顺序自增，但会出现不连续的情况。经邱同学研究，发现建表时，使用了cache。
记录解决问题--人大金仓insert重复数据
qq_42977853的博客
10-25 881
使用on conflict(id)，例如： INSERT INTO deleted_data (id,dataType,searchKey,objData,createTime) VALUES (#{id},#{dataType,jdbcType=INTEGER},#{searchKey,jdbcType=VARCHAR},#{objData, jdbcType=VARCHAR},(select sysdate from dual)) on conflict(id) do UPDAT
插入数据时遇到主键重复问题怎么办？——insert into数据库技巧 (insert into主键重复数据库)
0
10-22 3812
在使用数据库时，主键的作用非常重要，它可以确保数据的唯一性，避免重复插入数据。针对这种情况，我们可以采取忽略重复行、更新重复行、指定插入某些数据等处理方式，有效避免主键重复的问题。另外，在设计数据库表时，应该合理设计主键，并为需要唯一性约束的字段添加唯一索引，以及将主键设置成自增长，这样可以有效地避免主键重复的问题。但是在插入数据的过程中，有时候会遇到主键重复的问题，当这种情况发生时，该怎么处理呢？当我们执行插入数据的操作时，如果插入的数据的主键已经在表中存在，就会出现主键重复的情况。
MySQL忽略主键冲突，避免重复插入数据的三种方式
热门推荐
Morty的技术乐园
05-07 2万+
方案一：ignore 插入时检索主键列表，如存在相同主键记录，不更改原纪录，只插入新的记录。 INSERT IGNORE INTO ignore关键字所修饰的SQL语句执行后，在遇到主键冲突时会返回一个0，代表并没有插入此条数据。如果主键是由后台生成的（如uuid），我们可以通过判断这个返回值是否为0来判断主键是否有冲突，从而重新生成新的主键key。 这是此ignore关键字比较常用的一...
sqlserver插入数据时如何忽略主键重复的数据
Wslience的博客
05-25 6666
sqlserver插入数据时忽略重复主键
若表中有重复的主键或数据继续插入解决方案
u014683488的专栏
06-04 1546
使用数据库插入语句往表中插入数据，若需要插入表中的数据（或者数据的主键）如果已经在表中存在,因为id=3的主键在表中已经存在，所以强行执行SQL插入的话程序会报错. 解决方法： https://blog.youkuaiyun.com/a772304419/article/details/79669614 ...
insert --03--MySQL避免重复插入 主键
时光里的博客
04-20 1450
https://hujinyang.blog.youkuaiyun.com/article/details/90375106?
完美解决Thinkphp3.2中插入相同数据的问题
12-20
本文将详细探讨如何在ThinkPHP 3.2版本中处理插入重复数据的问题，以及MySQL中的两种解决方案——`ON DUPLICATE KEY UPDATE` 和 `REPLACE INTO`。 首先，我们需要理解问题背景。在使用ThinkPHP 3.2进行数据插入时，...
MySQL 处理插入过程中的主键唯一键重复值的解决方法
09-10
在MySQL数据库中，处理插入数据时遇到主键或唯一键重复的问题有多种策略。本文将详细讲解三种方法：IGNORE、ON DUPLICATE KEY UPDATE和REPLACE，它们都能有效地避免因键重复而导致的插入失败。 1. **IGNORE关键字**...
SQLServer中防止并发插入重复数据的方法详解
12-16
通过定义这些约束，数据库系统会在插入数据时自动检查重复，避免插入重复记录。 2. 插入时的条件查询 在插入数据时，可以利用条件查询来确保插入的数据不与现有数据冲突。例如，使用`INSERT INTO...SELECT`语句...
insert --02--on duplicate key update 避免重复插入主键
时光里的博客
04-20 1076
https://blog.youkuaiyun.com/hnnydxhxg/article/details/97901777 https://blog.youkuaiyun.com/banzhengyu/article/details/50888933? https://blog.youkuaiyun.com/eleanoryss/article/details/82997899 https://blog.youkuaiyun.com/plg17/article/details/78583692 https://blog.youkuaiyun.com/qq_2768
vue key值的 重复键 问题
Ewet
11-28 7130
在vue中，同一组件中兄弟元素之间使用for循环遍历数组，每一个for的key值不能使用下标来表示，不然这样会出现以下错误，也就是出现重复键的问题： [Vue warn]: Duplicate keys detected: '0'. This may cause an update error. 解决： 可以使用给每个可以加上一定的数值或字符来标记不同； 例：index+10  /   ...
mysql不能插入重复键_MySQL插入/打开重复键失败
weixin_39757122的博客
02-18 619
我有一些代码尝试使用2列的新值更新表的现有行 . 该行将始终存在 . 它具有主键和另一个唯一字段，更新指定唯一字段 . 我这样做是使用INSERT / ON DUPLICATE KEY UPDATE .但是，这并没有更新行，而是更新了主键为0时恰好存在的行 . 如果没有主键为0的行，则它可以正常工作 .我认为正在发生的事情是，由于我没有指定主键，MySQL正在为此处选择值0，然后它使用主键0更新行...
DB2添加数据时主键、唯一键冲突的解决方法
p15097962069的博客
08-20 963
DB2添加数据时主键、唯一键冲突的解决方法
解决数据重复插入问题(sql与锁方法)
qq_37431224的博客
06-24 6276
解决数据重复插入的sql与锁方案
MYSQL主键存在则更新，不存在则插入的解决方案（ON DUPLICATE KEY UPDATE）
hijk7的博客
05-12 364
MYSQL主键存在则更新，不存在则插入的解决方案（ON DUPLICATE KEY UPDATE）
MySQL 避免插入重复数据 数据重复时忽略，覆盖，更新
Abdulaziz的博客
12-28 4496
今天插入数据时遇到数据重复的问题，为了避免重复数据我尝试以下几种方法，最终选择使用replace into并成功解决数据重复的问题。 方法一 ： replace into 如果有相同主键（PRIMARY KEY）或者唯一约束（UNIQUE KEY）的记录时，先删除此记录，再重新插入。 需要注意的是：如果原来的记录存在(1,ab,22)，新记录为(1,ab)，那么replace后第三个字段为null，因此使用replace into 时需要保证数据的完整性。 假设id为主键,name为唯一约束： REPLAC
oracle主键冲突 ORA-00001
【轰炸机】的博客
05-10 3888
在迁移数据库后，有些表插入数据会报错： ORA-00001: unique constraint … violated. 这是主键冲突的错误，如果该表有主键自增长，可以检查 oracle 的 sequence select SEQUENCE_OWNER, SEQUENCE_NAME, MIN_VALUE, MAX_VALUE, INCREMENT_BY, CACHE_SIZE, LAST_NUMBER from all_sequences where SEQUENCE_OWNER = 'IRS';
数据库中插入数据主键不重复
最新发布
07-01
### 数据库插入数据避免主键重复 在数据库操作中，主键的唯一性约束是确保数据完整性的重要机制。然而，在实际插入数据时，可能会遇到主键重复的问题。为了避免这种情况，可以采取多种策略来确保插入的数据不会导致主键冲突。 #### 使用自增主键 对于整数类型的主键，最简单的解决方案是使用自增长（Auto Increment）功能。当新记录被插入时，如果没有指定主键值，数据库会自动为该字段分配一个唯一的递增值。这种方式简单且高效，适用于大多数场景[^4]。 ```sql CREATE TABLE example ( id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(255) ); ``` #### 忽略重复行 如果尝试插入一条与现有主键或唯一索引冲突的记录，可以通过`INSERT IGNORE`语句让数据库忽略这条记录而不报错。这种方法适合于那些不需要更新已有数据的情况[^4]。 ```sql INSERT IGNORE INTO your_table (id, column1, column2) VALUES (1, 'value1', 'value2'); ``` #### 替换现有行 另一种方法是使用`REPLACE INTO`语句。如果插入的记录与现有的主键或唯一索引冲突，则旧记录将被删除，新的记录会被插入。需要注意的是，这会导致原有数据丢失，因此仅在确实需要替换数据时才使用此方法。 ```sql REPLACE INTO your_table (id, column1, column2) VALUES (1, 'new_value1', 'new_value2'); ``` #### 更新冲突行 通过`ON DUPLICATE KEY UPDATE`子句可以在检测到主键或唯一键冲突时更新已有的记录。这种方式允许你在发现重复时选择性地修改某些列的值，从而保留相关数据并进行必要的调整[^4]。 ```sql INSERT INTO your_table (id, column1, column2) VALUES (1, 'value1', 'value2') ON DUPLICATE KEY UPDATE column1 = 'updated_value1', column2 = 'updated_value2'; ``` #### 使用时间戳作为主键的一部分 为了保证每条记录的唯一性，可以在主键中加入时间戳元素。例如，在MySQL中可以利用`TIMESTAMP`类型字段，并设置为自动更新，这样每次插入新记录时都会生成一个新的时间戳，有助于避免主键冲突[^2]。 ```sql CREATE TABLE logs ( log_id BIGINT NOT NULL AUTO_INCREMENT, ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, message TEXT, PRIMARY KEY (log_id, ts) ); ``` #### 检查是否存在再插入 对于没有设置主键或唯一索引的情况，可以在插入前检查是否已经存在相同的记录。使用`INSERT ... SELECT ... WHERE NOT EXISTS`结构可以实现这一点，这种方式适用于更复杂的逻辑判断[^3]。 ```sql INSERT INTO your_table (id, column1, column2) SELECT 1, 'value1', 'value2' FROM dual WHERE NOT EXISTS (SELECT * FROM your_table WHERE id = 1); ``` #### 批量插入时处理主键重复 在批量插入数据时，特别是使用像MyBatis这样的ORM框架时，可以通过动态生成不同的时间戳或其他唯一标识符来防止主键重复问题。例如，在MyBatis中结合循环索引来创建独特的`ts`值，以确保每条记录都有唯一的主键[^5]。 ```xml <insert id="batchInsert" parameterType="java.util.List"> INSERT INTO uri (id, name, uri, code, property_id, ts) VALUES <foreach collection="uriList" item="uri" separator="," index="index"> (#{uri.id}, #{uri.name}, #{uri.uri}, #{uri.code}, #{uri.propertyId}, NOW() + #{index}a) </foreach> </insert> ``` 以上方法可以根据具体的业务需求和数据库设计灵活选用，以确保在插入数据时不出现主键重复的问题。每种方法都有其适用场景，开发者应根据实际情况做出最佳选择。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值