使用spring jdbc的batchUpdate功能提高性能

最新推荐文章于 2022-10-30 20:20:21 发布

原创最新推荐文章于 2022-10-30 20:20:21 发布 · 3.6w 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#java #数据库

java 同时被 2 个专栏收录

47 篇文章

订阅专栏

database

9 篇文章

订阅专栏

在处理大量数据库插入操作时，Spring JDBC的batchUpdate功能可以显著提高性能。对比了逐行执行update和使用batchUpdate两种方法，实验显示在PostgreSQL中，批量插入1000个记录，batchUpdate速度是逐行插入的4倍；对于10000个记录，速度提升更甚，达到17倍。因此，当jdbc driver支持batchUpdate时，推荐使用该功能以优化数据库操作效率。

在spring batch中，我们经常使用spring提供的jdbcTemplate进行数据库操作。

假设有一张表People.我们需要插入多条数据。处理的方法有两种：

第一种方法是对每一个数据，都执行一直insert命令：

jdbcTemplate.update(INSERT_PEOPLE_QUERY, people.getFirstName(), people.getLastName());

第二种方法是使用batchUpdate的方法：

jdbcTemplate.batchUpdate(INSERT_PEOPLE_QUERY, transformToObjects(peoples));

private List<Object[]> transformToObjects(List<People> peoples) {
return from(peoples).transform(new Function<People, Object[]>() {
@Override
public Object[] apply(People people) {
return new Object[]{people.getFirstName(), people.getLastName()};
}
}).toList();
}

如果需要大量更新数据，并且使用的jdbc driver支持batchUpdate的情况下，使用batchUpdate会比直接执行逐行执行update效率快一个数量级。但如果jdbc不支持batchUpdate，那么jdbcTemplate的batchUpdate在其内部仍然是逐行执行。

我使用postgreSQL进行试验：

当需要插入1000个People时，逐行插入需要4秒，使用batchUpdate需要时间不到1秒

当需要插入10000个People时，逐行插入需要17秒，使用batchUpdate仅仅需要1秒