MyBatis批量插入数据用foreach比较慢试一下BATCH

最新推荐文章于 2025-04-24 16:46:07 发布

缒忆往昔丶峥嵘岁月

最新推荐文章于 2025-04-24 16:46:07 发布

阅读量1.1k

点赞数

分类专栏： mybatis 文章标签： spring boot redis 运维

本文链接：https://blog.youkuaiyun.com/love_zhang_xin/article/details/121414871

版权

mybatis 专栏收录该内容

1 篇文章

订阅专栏

本文介绍了一种通过批量插入来提高数据库操作效率的方法，并给出了具体的MyBatis实现方式及JDBC示例，实验证明该方法能显著减少插入大量数据时的时间消耗。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

<insert id="batchInsert" parameterType="java.util.List">
    insert into USER (id, name) values
    <foreach collection="list" item="model" index="index" separator=","> 
        (#{model.id}, #{model.name})
    </foreach>
</insert>

这个方法提升批量插入速度的原理是，将传统的：

INSERT INTO `table1` (`field1`, `field2`) VALUES ("data1", "data2");
INSERT INTO `table1` (`field1`, `field2`) VALUES ("data1", "data2");
INSERT INTO `table1` (`field1`, `field2`) VALUES ("data1", "data2");
INSERT INTO `table1` (`field1`, `field2`) VALUES ("data1", "data2");
INSERT INTO `table1` (`field1`, `field2`) VALUES ("data1", "data2");

转化为：

INSERT INTO `table1` (`field1`, `field2`) 
VALUES ("data1", "data2"),
("data1", "data2"),
("data1", "data2"),
("data1", "data2"),
("data1", "data2");

经过项目实践发现，当表的列数较多（20+），以及一次性插入的行数较多（5000+）时，整个插入的耗时十分漫长，达到了14分钟，这是不能忍的。一次性插20~50行数量是比较合适的，时间消耗也能接受。

MyBatis session 的 executor type 设为 Batch ，然后多次执行插入语句。就类似于JDBC的下面语句一样。

Connection connection = DriverManager.getConnection("jdbc:mysql://127.0.0.1:3306/mydb?useUnicode=true&characterEncoding=UTF-8&useServerPrepStmts=false&rewriteBatchedStatements=true","root","root");
connection.setAutoCommit(false);
PreparedStatement ps = connection.prepareStatement(
        "insert into tb_user (name) values(?)");
for (int i = 0; i < stuNum; i++) {
    ps.setString(1,name);
    ps.addBatch();
}
ps.executeBatch();
connection.commit();
connection.close();

经过试验，使用了 ExecutorType.BATCH 的插入方式，性能显著提升，不到 2s 便能全部插入完成。