hibernate中批量处理的解决方案

最新推荐文章于 2025-08-09 20:21:24 发布

王姐

最新推荐文章于 2025-08-09 20:21:24 发布

阅读量479

点赞数

分类专栏： JAVA 文章标签： hibernate session 数据库 user exception delete

JAVA 专栏收录该内容

41 篇文章

订阅专栏

本文探讨了在实际开发中优化批量数据库操作性能的方法，包括绕过Hibernate API使用JDBCAPI、运用存储过程以及利用HibernateAPI进行常规批量处理的改进策略。重点介绍了通过定量控制操作量以减轻性能负担，并通过实例演示了更新和保存操作的优化方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

实际开发中的一些问题：
批量的修改数据库字段（大数据量），
因为hibernate中提供了批量处理的解决方案

Hibernate批量处理其实从性能上考虑，它是很不可取的，浪费了很大的内存。从它的机制上讲，Hibernate它是先把符合条件的数据查出来，放到内存当中，然后再进行操作。实际使用下来性能非常不理想,在笔者的实际使用中采用下面的第三种优化方案的数据是:100000条数据插入数据库,主流台式机的配置,需要约30分钟,呵呵,晕倒。
总结下来有三种来处理以解决性能问题：

1：绕过Hibernate API ，直接通过 JDBC API 来做，这个方法性能上是比较好的。也是最快的。
2：运用存储过程。
3：还是用Hibernate API 来进行常规的批量处理，可以也有变，变就变在，我们可以在查找出一定的量的时候，及时的将这些数据做完操作就
删掉，session.flush();session.evict(XX对象集); 这样也可以挽救一点性能损失。这个“一定的量”要就要根据实际情况做定量参考了。一般为30-60左右,但效果仍然不理想。
1：绕过Hibernate API ，直接通过 JDBC API 来做，这个方法性能上是比较好的，也是最快的。(实例为更新操作)
Transaction tx=session.beginTransaction(); //注意用的是hibernate事务处理边界
Connection conn=session.connection();
PreparedStatement stmt=conn.preparedStatement("update CUSTOMER as C set C.sarlary=c.sarlary+1 where c.sarlary>1000");
stmt.excuteUpdate();
tx.commit(); //注意用的是hibernate事务处理边界
这小程序中，采用的是直接调用JDBC 的API 来访问数据库，效率很高。避免了Hibernate 先查询出来加载到内存，再进行操作引发的性能问题
2：运用存储过程。但这种方式考虑到易植和程序部署的方便性,不建议使用.(实例为更新操作)如果底层数据库（如Oracle）支持存储过程，也可以通过存储过程来执行批量更新。存储过程直接在数据库中运行，速度更加快。在Oracle数
据库中可以定义一个名为batchUpdateCustomer()的存储过程，代码如下：
代码内容
create or replace procedure batchUpdateCustomer(p_age in number) as
begin
update CUSTOMERS set AGE=AGE+1 where AGE>p_age;
end;
以上存储过程有一个参数p_age，代表客户的年龄，应用程序可按照以下方式调用存储过程：
代码内容
tx = session.beginTransaction();
Connection con=session.connection();
String procedure = "{call batchUpdateCustomer(?) }";
CallableStatement cstmt = con.prepareCall(procedure);
cstmt.setInt(1,0); //把年龄参数设为0
cstmt.executeUpdate();
tx.commit();
从上面程序看出，应用程序也必须绕过Hibernate API，直接通过JDBC API来调用存储过程。
3：还是用Hibernate API 来进行常规的批量处理，可以也有变，变就变在，我们可以在查找出一定的量的时候，及时的将这些数据做完操作就删掉，session.flush();session.evict(XX对象集); 这样也可以挽救一点性能损失。这个“一定的量”要就要根据实际情况做定量参考了。。
(实例为保存操作)
业务逻辑为：我们要想数据库插入10 0000 条数据
tx=session.beginTransaction();
for(int i=0;i[size=x-small;]         {
                  session.flush();
                  session.clear();
         }
}
这样可以把系统维持在一个稳定的范围

批量插入：
//打开session
Session session = sessionFactory.openSession();
Transaction tx = session.begainTransaction();
//循环100000次，插入100000条记录
for(int i = 0;i<=100000;i++){
           //创建User实例
           User u1 = new User();
           u1.setName("XXXX"+i);
           u1.setAge(i);
           u1.setAddress("China");
           //在Session级别缓存user实例
           session.save(u1);
           //每当累加器是20 的倍数时，将session中的数据刷如数据库，并清空session缓存
           if(i%20==0){
                      session.flush();
                      session.clear();
                      tx.commit();
                      tx = session.beginTransaction();
           }
}
//提交事物
tx.commit();
//关闭事物
hibernateUtil.closeSession();

hibernate中2级缓存还需配置：hibernate.cache.use_second_level_cache false

批量更新：
//打开session
Session session = sessionFactory.openSession();
//开始事物
Transaction tx = session.begainTransaction();
//查询出User表中的所有数据
ScrollableResult user = session.createQuery("from user")
           .setCacheMode(Cache.Mode.IGNORE).scroll(ScrollMode.FOREARD_ONLY);
int count = 0;
//遍历user表中所有的记录
while (user.next()){
           User u = (User)users.get(0);
           u.setName("新用户名"+count);
           //当count为20的倍数时，将更新的结果从session中刷新到数据库
           if(++count%20==0){
                       session.flush();
                       session.clear();
           }
}
//提交事物
tx.commit();
//关闭事物
hibernateUtil.closeSession();
但是这种风格的语句性能较低

可以使用hibernate提供的HQL批量的更新和删除 UPDATE|DELETE FROM? ClassName [WHERE WHERE_CONDITIONS]
假设批量更新User类实例的name属性，可以如下代码：
private void testUser()throws Exception{
            //打开session
            Session session = sessionFactory.openSession();
            //开始事物
            Transaction tx = session.begainTransaction();
            //定义批量更新的HQL语句
            String hqlUpdate = "update User set name =：newName";
            //执行更新
            int updateEntities = session.createQuery(hqlUpdate)
                                 .setString("newName","新名字").executeUpdate();
            //提交事物
            tx.commit();
            //关闭事物
            hibernateUtil.closeSession();
}
批量的删除HQL：
private void testUser()throws Exception{
            //打开session
            Session session = sessionFactory.openSession();
            //开始事物
            Transaction tx = session.begainTransaction();
            //定义批量更新的HQL语句
            String hqlUpdate = "delete User";
            //执行批量删除
            int updateEntities = session.createQuery(hqlUpdate).executeUpdate();
            //提交事物
            tx.commit();
            //关闭事物
            hibernateUtil.closeSession();
}
Query.executeUpdate()方法返回的是一个整型值，该值是受此操作影响的记录条数

原文地址：hibernate的HQL实现批量的增删改操作 作者：快乐天使

hibernate3.0 实现了批量的增、删、改的操作。就是了insert/delete/update可以批量的实现。但是不建议使用，因为当执行了批量的update delete insert后，当执行session.commit()时，数据库中更新后的数据了，可是缓存里面不会改。它跟session不同，当session.update（），修改一个数据后，当执行session..commit()后，数据库中的数据会改变，同时缓存中的数据也会发生改变。这样就不会产生数据的不一致。

而这种批量的语句，如delete update insert会把数据库中的数据修改，例如，要改一万条数据，数据库中的1万条数据都会改变了。但是缓存里面不会变。这样当再使用这个数据时，就可以有问题，因为出现脏数据了。缓存里面的数据跟数据库里面的数据根本就不一样。所以我们就建议使用。那么什么时候使用呢？除非这个数据变化不是很大。如果这个数据相对于静态，就是很长时间才会更新一下。这样就没有问题。。因为在这很长时间内，如果把session关闭了，则缓存里面就没有数据了。下次再修改时，就不会出现因为数据不一致而发生错误了。

一、

测试类：

package com.bjsxt.hibernate;

import java.util.Iterator;

import java.util.List;

import org.hibernate.Session;

import junit.framework.TestCase;

public class DMLQuertTest extends TestCase {

public void testQuery1(){

Session session=null;

try{

session=HibernateUtils.getSession();