【业务功能篇52】Springboot+mybatis mysql开启批量执行sql参数 allowMultiQueries=true

最新推荐文章于 2024-10-02 23:21:04 发布

原创最新推荐文章于 2024-10-02 23:21:04 发布 · 5.8k 阅读

7 ·

CC 4.0 BY-SA版权

文章标签：

#spring boot #后端 #java #mybatis #批量数据操作

Spring boot 同时被 3 个专栏收录

95 篇文章

订阅专栏

业务场景实例问题

92 篇文章

订阅专栏

Mysql&Mybatis高效语法

36 篇文章

订阅专栏

allowMultiQueries参数启用后，允许在SQL语句中使用分号分隔执行多条命令。配合rewriteBatchedStatements参数，能提升批量插入、更新的性能。在配置文件中设置这些参数，例如url中包含allowMultiQueries=true&rewriteBatchedStatements=true，可以实现更高效的数据库操作，如DAO层中的批量更新示例所示，这比单条插入或更新更有效率。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

`allowMultiQueries=true`参数的作用：

可以在sql语句后携带分号，实现多语句执行。
可以执行批处理，同时发出多个SQL语句。

在application-xxx.xml配置文件中，配置数据库的信息

spring:
  datasource:
    dynamic:
      primary: mysqldb # 默认数据源
      datasource: 
        mysqldb:
          driverClassName: org.mariadb.jdbc.Driver
          url: jdbc:mysql://localhost:3306/data_dev?useUnicode=yes&characterEncoding=UTF-8&useAffectedRows=true&allowMultiQueries=true&autoReconnect=true&failOverReadOnly=false

实例 dao层xml:

逐条更新，但一次提交给MySQL服务器而已。
利用foreach 遍历循环，传入的list集合数据，批量的进行update

<update id="updateStudentBatch" parameterType="java.util.List">
    <foreach collection="list" item="item" index="index">
        UPDATE mutest.student
        <set>
            <if test="item.name != null">
                name=#{item.name},
            </if>
            <if test="item.age != null">
                age=#{item.age}
            </if>
        </set>
        WHERE
        id=#{item.id};
    </foreach>
</update>

批处理 rewriteBatchedStatements=true
关于rewriteBatchedStatements这个参数：当前项目中未使用过

MySQL的JDBC连接的url中要加rewriteBatchedStatements参数，并保证5.1.13以上版本的驱动，才能实现高性能的批量插入。
MySQL JDBC驱动在默认情况下会无视executeBatch()语句，把我们期望批量执行的一组sql语句拆散，一条一条地发给MySQL数据库，批量插入实际上是单条插入，直接造成较低的性能。
只有把rewriteBatchedStatements参数置为true, 驱动才会帮你批量执行SQL
另外这个选项对INSERT/UPDATE/DELETE都有效
添加rewriteBatchedStatements=true这个参数后的执行速度比较：
同个表插入一万条数据时间近似值：
JDBC BATCH 1.1秒左右 > Mybatis BATCH 2.2秒左右 > 拼接SQL 4.5秒左右
demo：
master.jdbc.url=jdbc:mysql://112.126.84.3:3306/outreach_platform?useUnicode=true&characterEncoding=utf8&allowMultiQueries=true&rewriteBatchedStatements=true

ps:mysql的话只要在url后面加上&rewriteBatchedStatements=true即可,但是sqlServer则需要以分号分隔;rewriteBatchedStatements=true