hibernate批处理

最新推荐文章于 2023-11-23 22:13:34 发布

贫道四十七

最新推荐文章于 2023-11-23 22:13:34 发布

阅读量482

点赞数

CC 4.0 BY-SA版权

分类专栏： hibernate 文章标签： hibernate 事务

本文链接：https://blog.youkuaiyun.com/qq915697213/article/details/40978487

hibernate 专栏收录该内容

7 篇文章

订阅专栏

在hibernate处理大量数据事务时，一次性commit可能导致内存溢出。为解决此问题，hibernate提供了批处理功能，允许在内存达到一定操作数（如20）时手动提交事务。通过配置文件设置批处理大小，可以有效避免内存占用过高。此外，文中还提及了flush()和clear()的区别：flush()在清空缓存前先提交所有待执行的sql，而clear()则直接清除缓存不考虑未提交的操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hibernate中进行事务处理的时候，会将一个事务中的所有操作集中commit，假设一种情况，同时有数十万甚至数百万插入数据的sql一起执行，那么会出现这么一个情况，

就是在还没有等到commit的时候，内存就已经占满了，eclipse会报一个内存溢出的error，如果想要模拟这个异常，可以设置一个20万次的循环，当然如果电脑足够好的话，

还可以往上增加。。。

hibernate提供了解决这种麻烦的手段，那就是批处理。

首先，需要在hibernate的配置文件中加入这样一条设置，其中数值20是自定义的，也就是批处理的数量，当内存中有这么多次操作等待提交的时候，手动进行提交

 <property name="hibernate.jdbc.batch_size" >20</property>

下面是测试:

package com.test;

import org.hibernate.Session;
import org.hibernate.Transaction;

import com.entity.User;
import com.util.HibernateUtil;

public class TestBatch {

	public static void main(String[] args) {
		Session session = HibernateUtil.getSessionFactory().openSession();
		Transaction tr = session.beginTransaction();
		for(int i=0;i<2000;i++){
			User user = new User("wangwu", "wangwu", "1111111", "wangwu", 1, 22);
			session.save(user);
			if(i%20==0){//20与hibernate.cfg.xml中设置的数量保持一直
				session.flush();
				session.clear();
			}
		}
		tr.commit();
		session.close();
	}
}

这里顺便说一下flush()和clear()方法的区别，本来是属于缓存那一块的内容，前面忘记写了，就在这里提一下。

flush()是将缓存清空，但是在清空之前，它会将内存中等待提交的sql执行完了之后再清空(主要是增、删、改)，

而claer()则不管其他，直接将缓存清空，