hibernate保存十万级数据量的批量保存操作,

最新推荐文章于 2024-08-05 15:01:49 发布

你愁啥啊

最新推荐文章于 2024-08-05 15:01:49 发布

阅读量1.4w

点赞数 4

分类专栏： java 文章标签： java hibernate 批量保存

本文链接：https://blog.youkuaiyun.com/java_niucheng/article/details/80318514

版权

本文探讨了在使用Hibernate处理十万级数据量时遇到的问题，通过关闭二级缓存、分批保存和调整配置，实现了批量保存操作。控制器中将数据分块处理，每批一万条，服务层和DAO层配合完成数据的刷新与持久化。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

图一是我导入的第一张表,最大数据量也就2万多条,hibernate关闭二级缓存勉强能够导入,导入图二的7万多条数据时,就会在执行hibernate的save()停在2万多条.

具体配置:

1.修改spring的管理hibernate的配置

<bean id="webDataSource" class="com.alibaba.druid.pool.DruidDataSource"  
 </span>init-method="init" destroy-method="close">  
 </span><property name="url" value="${web.jdbc.connection.url}" />  
 </span><property name="username" value="${web.jdbc.connection.username}" />  
 </span><property name="password" value="${web.jdbc.connection.password}" />  
 </span><!-- 配置初始化大小、最小、最大 -->  
 </span><property name="initialSize" value="1" />  
 </span><property name="minIdle" value="1" />  
 </span><property name="maxActive" value="20" />  
 </span><!-- 配置获取连接等待超时的时间 -->  
 </span><property name="maxWait" value="6000000" />  
 </span><!-- 配置间隔多久才进行一次检测，检测需要关闭的空闲连接，单位是毫秒 -->  
 </span><property name="timeBetweenEvictionRunsMillis" value="60000" />

最低0.47元/天解锁文章