之前写的一个业务服务,也就跨库的增查改,随着业务量在增加,慢到无法忍受的地步了,小2万的数据,竟然耗时3630s,一个多小时!
后来经过一番优化,实现了20倍的提升,且还有提升空间!
此番优化,主要集中在以下几个方面:
1、减少select语句,或将查询结果缓存起来;
2、能一次性insert的,不做多次update,之前是先将主要数据insert,再select后作update,这样虽然代码清晰,但却造成指数级的性能损耗。
3、启用多线程。
多线程,就好比有多个帮手,原来一人干的活,找了无数的帮手同时来完成,速度当然是嗖嗖的快!
具体如下:
假设为方法是:
for(Date d :dates){
methodA()//原有方法
}
多线程:
int w = dates.size();
int executorSize = Math.min(w,31)//取w,与31的较小者
ExecutorService executor = Executors.newFixedThreadPool(executorSize);//开启多个线程
for(Date d:dates){
Runable task = new Runable(){
@Override
public void run(){
methodA();//原有方法,不变
}
};
executor.submit(task);//执行单个线程
}
executor.shutdown();//任务结束时关闭多线程
while(true){
if(executor.isTerminated()){
break;
}
try{
Thread.sleep(50);
}catch(InterruptedException e){
LogKit.error(e.getMessage(),e);
}
}