spring+ibatis 批量提交数据提升性能

最新推荐文章于 2017-04-01 19:47:49 发布

最新推荐文章于 2017-04-01 19:47:49 发布 · 199 阅读

文章标签：

通过Spring集成ibatis实现批量数据插入，减少数据库连接次数，提升60%-70%的性能。适用于大量数据处理场景。

在系统中，提取数据循环计算后，每次需要有大概3000条左右的数据需要提交到数据库。以前在循环中单条插入，开始只有200条左右的数据，看不出性能上的问题，现在数据量增长了很多，所以需要对提交功能做一下优化。spring集成了ibatis的批量提交的功能，我们只要调用API就可以了
首先在你的dao中需要继承org.springframework.orm.ibatis.support.SqlMapClientDaoSupport
然后在代码中调用getSqlMapClientTemplate方法，覆写SqlMapClientCallback类中的doInSqlMapClient的方法
public void insertTreeCateBatch(final List<TreeCate> TreeCateList) throws DataAccessException{
this.getSqlMapClientTemplate().execute(new SqlMapClientCallback(){
public Object doInSqlMapClient(SqlMapExecutor executor)
throws SQLException {
executor.startBatch();
int batch = 0;
for(TreeCate TreeCate:TreeCateList){
//调用获取sequence的方法。如果没有的话就去掉这行代码。
TreeCate.setTreeCateId(getNextId());
//参数1为：ibatis中需要执行的语句的id
executor.insert("TreeCate_insertTreeCate", TreeCate);
batch++;
//每500条批量提交一次。
if(batch==500){
executor.executeBatch();
batch = 0;
}
}
executor.executeBatch();
return null;
}
});
}
批量插入减少了获取数据库连接池的次数，经过测试可以提高60%到70%的性能，大家不妨在项目中使用一下。