MyBatis的SQL语句批量执行

本文介绍了一种利用MyBatis和Spring中的jdbcTemplate批量执行SQL语句的方法,适用于需要频繁执行SQL操作的场景。通过自定义批处理方法,可以避免传统方式下频繁连接数据库导致的性能瓶颈。注意,该方法不包含事务控制,需在业务层进行统一管理。

一、背景

为了提升性能,时常需要批量执行SQL语句。但是MyBATIS官方并没有给出很好的解决方案。俗话说,自己动手,丰衣足食。自己写一个呗

 

二、实现思路

Spring中的jdbcTemplate.batchUpdate()能够批量执行SQL语句。所以,只要想办法拿到Mybatis中的SQL语句(以?作为占位符),然后结合jdbcTemplate.batchUpdate()就能够批量执行了

但是,要注意的是此处没有事务控制,事务控制在业务外层需要自己控制

 

三、代码实现

    /**
     * 批处理的最大执行次数
     */
protected static final int MAX_BATCH_COUNT = 1000;
 
@Resource
private JdbcTemplate jdbcTemplate;


 /**
     * <p>
     * 批量处理update或insert, 使用jdbcTemplate做批处理
     * </p>
     * <p>
     * List中的对象需要和sqlMapper中的parameterType属性一致
     * </p>
     * 
     * @param sqlId sqlMap中的ID
     * @param objList 需要增加或更新的obj对象
     * @return
     */
    public <T> int executeBatch(@Nullable final String sqlId, @Nullable final List<T> objList) {

        if (StringUtils.isEmpty(sqlId) || CollectionUtils.isEmpty(objList)) {
            throw new IllegalArgumentException("请求参数不能为空!");
        }

        SqlSessionDaoSupport daoSupport = (SqlSessionDaoSupport) updateDAO;
        // 从mybatis配置文件中获取动态sql
        BoundSql bound = daoSupport.getSqlSession().getConfiguration().getMappedStatement(sqlId).getSqlSource()
                .getBoundSql(objList.get(0));
        String preparedSql = bound.getSql();
        final List<ParameterMapping> parameterMappingList = bound.getParameterMappings();

        int[][] result = jdbcTemplate.batchUpdate(preparedSql, objList, MAX_BATCH_COUNT,
                new ParameterizedPreparedStatementSetter<T>() {

                    @Override
                    public void setValues(PreparedStatement ps, T obj) throws SQLException {

                        Map map = convertParamToMap(obj);
                        if (map.size() == 0) {
                            throw new IllegalArgumentException("参数类型错误!");
                        }

                        for (int index = 0; index < parameterMappingList.size(); index++) {
                            ParameterMapping parameter = parameterMappingList.get(index);

                            Object o = map.get(parameter.getProperty());
                            if (o == null) {
                                if (parameter.getJavaType() == Boolean.class) {
                                    if (parameter.getProperty().startsWith("is")) {
                                        String booleanPropertyName = StringUtils.uncapitalize(StringUtils.substring(
                                                parameter.getProperty(), 2));
                                        o = map.get(booleanPropertyName);
                                    }
                                    if (o == null) {
                                        logger.error("请求参数属性名称不合法, 找不到批处理请求数据的属性值[" + parameter.getProperty() + "]");
                                    }
                                }
                            } else {
                                // 如果是枚举类型,则转换成name
                                if (o.getClass().isEnum()) {
                                    o = o.toString();
                                }
                            }
                            ps.setObject(index + 1, o);
                        }
                    }
                });
        int succ = 0;
        for (int i = 0; i < result.length; i++) {
            for (int j = 0; j < result[i].length; j++) {
                succ += result[i][j] > 0 ? 1 : 0;
            }
        }

        return succ;
    }

    private Map convertParamToMap(Object param) {
        if (param == null) {
            return Maps.newHashMap();
        }

        if (param instanceof Map) {
            return (Map) param;
        } else {
            return BeanMappingUtil.describe(param);
        }
    }

 

其中:BeanMappingUtil是guava的包

<think>好的,我现在需要回答用户关于如何使用MyBatis动态SQL实现批量插入的问题。用户已经提供了几个引用内容,我需要仔细分析这些引用,找到相关的信息,并组织成一个清晰的回答。 首先,查看用户提供的引用。引用[1]提到MyBatis的动态SQL功能,特别是<foreach>标签,用于遍历集合生成SQL语句。引用[3]也强调了<foreach>在批量插入和动态更新中的应用。引用[4]则给出了Mapper接口和XML配置的示例,其中有一个批量插入的方法定义。这些引用都指向使用<foreach>标签来处理批量插入。 接下来,我需要回忆MyBatis的基本用法。批量插入通常涉及在INSERT语句中插入多个值,而<foreach>标签可以用来遍历集合,生成多个VALUES子句。例如,INSERT INTO table (col1, col2) VALUES (a1, a2), (b1, b2)...这样的结构。 根据引用[4],Mapper接口中定义了一个方法batchInsert,参数是一个用户列表,并用@Param注解指定了名称。对应的XML文件中,应该使用<insert>标签,并在VALUES部分使用<foreach>来循环遍历users集合,生成多个(#{item.col1}, #{item.col2})。 需要注意的点包括:在SQL语句中正确的占位符写法,比如使用#{item.属性名},并且确保<foreach>的collection属性与@Param注解的名称一致。另外,separator属性应该设置为",",以便在每个值之间添加逗号分隔。 此外,可能还需要考虑数据库连接配置是否允许批量操作,比如在JDBC URL中添加rewriteBatchedStatements参数以提高性能,但用户的问题主要是关于动态SQL的实现,所以这部分可能不需要详细展开,但可以作为优化点提及。 现在需要将步骤分点说明,先给出接口定义,再展示XML配置,并提供代码示例。同时,要解释各个部分的作用,比如@Param注解、<foreach>的属性含义等。最后,可以补充注意事项,比如集合名称一致性和批量插入的性能优化。 需要确保回答结构清晰,步骤明确,让用户能够按照示例实现批量插入功能。同时,要使用中文,并正确应用LaTeX格式,比如变量名用$...$包裹,但根据用户要求,可能在这个问题中涉及代码示例较多,数学公式较少,但如果有变量或参数名可能需要用行内格式。 最后,生成相关问题,可能涉及其他动态SQL标签、性能优化方法,或者与批量插入相关的其他操作,比如批量更新或删除。</think>### MyBatis动态SQL实现批量插入的方法 以下是使用MyBatis动态SQL实现批量插入的完整步骤及示例代码: #### 1. Mapper接口定义 在Mapper接口中添加批量插入方法,使用`@Param`注解指定集合参数名称: ```java public interface UserMapper { void batchInsert(@Param("users") List<User> users); } ``` 说明:`@Param("users")`表示XML中通过`users`引用该集合[^4]。 #### 2. XML映射文件配置 在Mapper XML中使用`<foreach>`标签遍历集合生成SQL: ```xml <insert id="batchInsert"> INSERT INTO user (name, age, email) VALUES <foreach collection="users" item="item" separator=","> (#{item.name}, #{item.age}, #{item.email}) </foreach> </insert> ``` - `collection="users"`:对应接口方法中的`@Param("users")`[^4] - `item="item"`:集合元素的临时变量名 - `separator=","`:每次循环后添加逗号分隔符[^3] #### 3. Java调用示例 ```java List<User> userList = new ArrayList<>(); // 添加多个User对象到列表 userMapper.batchInsert(userList); ``` #### 4. 最终生成的SQL 若插入3条记录,生成的SQL为: ```sql INSERT INTO user (name, age, email) VALUES ('张三', 25, 'zhangsan@example.com'), ('李四', 30, 'lisi@example.com'), ('王五', 28, 'wangwu@example.com') ``` ### 注意事项 1. **集合名称一致性**:XML中的`collection`值必须与`@Param`注解的名称完全一致 2. **批量优化**:大数据量时建议在JDBC URL中添加`rewriteBatchedStatements=true`启用批量优化 3. **事务控制**:批量操作应在事务中执行以保证原子性 ### 其他实现方式 对于**特别大的数据集**(如10万+),可采用分批次批量插入: ```xml <insert id="batchInsert"> <foreach collection="users" item="item" separator=";"> INSERT INTO user (name, age, email) VALUES (#{item.name}, #{item.age}, #{item.email}) </foreach> </insert> ``` 此方式生成多条INSERT语句,需确保数据库支持多语句执行[^3]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值