mapper同时添加数据只能添加一条_mybatis中批量插入的两种方式(高效插入)

本文介绍了MyBatis中批量插入数据的两种方法:使用foreach标签构建SQL的in条件,以及设置ExecutorType为BATCH进行批量执行。详细解释了foreach的属性和使用场景,以及在批处理模式下如何手动提交和管理事务,以提高插入性能。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

MyBatis简介

MyBatis是一个支持普通SQL查询,存储过程和高级映射的优秀持久层框架。MyBatis消除了几乎所有的JDBC代码和参数的手工设置以及对结果集的检索封装。MyBatis可以使用简单的XML或注解用于配置和原始映射,将接口和Java的POJO(Plain Old Java Objects,普通的Java对象)映射成数据库中的记录。

一、mybiats foreach标签

foreach的主要用在构建in条件中,它可以在SQL语句中进行迭代一个集合。foreach元素的属性主要有 item,index,collection,open,separator,close。item表示集合中每一个元素进行迭代时的别名,index指 定一个名字,用于表示在迭代过程中,每次迭代到的位置,open表示该语句以什么开始,separator表示在每次进行迭代之间以什么符号作为分隔 符,close表示以什么结束,在使用foreach的时候最关键的也是最容易出错的就是collection属性,该属性是必须指定的,但是在不同情况 下,该属性的值是不一样的,主要有一下3种情况:

如果传入的是单参数且参数类型是一个List的时候,collection属性值为list

如果传入的是单参数且参数类型是一个array数组的时候,collection的属性值为array

如果传入的参数是多个的时候,我们就需要把它们封装成一个Map了

具体用法如下:

INSERT INTO TStudent(name,age)

SELECT #{item.name} as a, #{item.age} as b FROM DUAL

二、mybatis ExecutorType.BATCH

Mybatis内置的ExecutorType有3种,默认的是simple,该模式下它为每个语句的执行创建一个新的预处理语句,单条提交sql;而batch模式重复使用已经预处理的语句,并且批量执行所有更新语句,显然batch性能将更优; 但batch模式也有自己的问题,比如在Insert操作时,在事务没有提交之前,是没有办法获取到自增的id,这在某型情形下是不符合业务要求的

具体用法如下:

*方式一 spring+mybatis 的

//获取sqlsession

//从spring注入原有的sqlSessionTemplate

@Autowired

private SqlSessionTemplate sqlSessionTemplate;

// 新获取一个模式为BATCH,自动提交为false的session

// 如果自动提交设置为true,将无法控制提交的条数,改为最后统一提交,可能导致内存溢出

SqlSession session = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH,false);

//通过新的session获取mapper

fooMapper = session.getMapper(FooMapper.class);

int size = 10000;

try{

for(int i = 0; i < size; i++) {

Foo foo = new Foo();

foo.setName(String.valueOf(System.currentTimeMillis()));

fooMapper.insert(foo);

if(i % 1000 == 0 || i == size - 1) {

//手动每1000个一提交,提交后无法回滚

session.commit();

//清理缓存,防止溢出

session.clearCache();

}

}

} catch (Exception e) {

//没有提交的数据可以回滚

session.rollback();

} finally{

session.close();

}

spring+mybatis

方法二:

结合通用mapper sql别名最好是包名+类名

public void insertBatch(Map paramMap, List list) throws Exception {

// 新获取一个模式为BATCH,自动提交为false的session

// 如果自动提交设置为true,将无法控制提交的条数,改为最后统一提交,可能导致内存溢出

SqlSession session = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH, false);

try {

if(null != list || list.size()>0){

int lsize=list.size();

for (int i = 0, n=list.size(); i < n; i++) {

User user= list.get(i);

user.setIndate((String)paramMap.get("indate"));

user.setDatadate((String)paramMap.get("dataDate"));//数据归属时间

//session.insert("com.xx.mapper.UserMapper.insert",user);

//session.update("com.xx.mapper.UserMapper.updateByPrimaryKeySelective",_entity);

session.insert(“包名+类名", user);

if ((i>0 && i % 1000 == 0) || i == lsize - 1) {

// 手动每1000个一提交,提交后无法回滚

session.commit();

// 清理缓存,防止溢出

session.clearCache();

}

}

}

} catch (Exception e) {

// 没有提交的数据可以回滚

session.rollback();

e.printStackTrace();

} finally {

session.close();

}

}

以上所述是小编给大家介绍的mybatis中批量插入的两种方式(高效插入),希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!

### 使用 MyBatis 实现高效批量插入 为了实现高效批量插入操作,在 MyBatis 中采用特定的技术手段能够显著提升性能。对于大批量数据插入场景,推荐使用基于 `SqlSessionFactory` 的批处理机制[^2]。 #### 方案概述 当涉及到大量记录(如十万条以上)的数据插入时,直接利用简单的循环调用 insert 或者仅依赖于 MyBatis 自带的 `<foreach>` 标签并不是最佳实践,因为这两种方式都会导致频繁创建 SQL 语句并执行,从而影响整体性能。相比之下,通过配置合适的事务管理以及合理设置 JDBC 驱动程序参数,可以有效减少网络往返次数和资源消耗,进而加快插入速度。 #### 关键技术要点 - **启用批处理模式**:确保数据库连接池支持批处理功能,并调整相应的驱动属性以优化大容量写入操作。 - **控制提交频率**:设定合理的批次大小,比如每五千到一万条记录作为一个批次进行一次性 commit 操作,而不是每次都立即同步至磁盘文件系统中去。 - **禁用自动提交**:关闭默认开启的 auto-commit 功能,允许应用程序显式地控制何时将更改永久化保存下来。 - **预编译 SQL 语句**:尽可能重用 PreparedStatement 对象,避免重复解析相同的查询模板,降低 CPU 和内存开销。 ```java // Java代码示例展示如何配置 SqlSession 来启动批处理会话 try (SqlSession sqlSession = sessionFactory.openSession(ExecutorType.BATCH)) { try { UserMapper mapper = sqlSession.getMapper(UserMapper.class); List<User> users = generateUsers(); // 假设这里有一个函数用于生成待插入的对象列表 int batchSize = 5000; for (int i = 0; i < users.size(); ++i) { mapper.insertUser(users.get(i)); if ((i + 1) % batchSize == 0 || i == users.size() - 1) { sqlSession.flushStatements(); sqlSession.clearCache(); } } sqlSession.commit(); } catch (Exception e) { sqlSession.rollback(); throw e; } } ``` 上述代码展示了如何在一个批处理会话内连续执行多个插入命令而不中断事务上下文环境,直到达到预定的数量阈值或是完成全部任务之后再统一提交变更。这种方式不仅减少了与数据库交互的成本,而且有助于维持良好的并发性和响应时间特性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值