需求
项目使用springboot,有一个场景需要先从本地查询所有数据,然后再调用第三方接口填充其他字段,每次调用第三方接口都需要本地数据的字段作为查询条件。厂商提供的接口只能单个查询,所以只能遍历从本地查询的数据然后挨个调用接口,这样响应时间实在慢且效率太低。
那就想办法优化呗,第一想法肯定是启用多线程,让每一条从本地数据库查询的记录可以并行调用第三方接口。
首先新建一个线程任务类来调用第三方接口并填充数据,用spring的@Async注解实现异步调用,伪代码如下:
-
@Component
-
public
class AsyncTask {
-
-
-
/**
-
* 异步调用第三方接口查询
-
*/
-
@Async
-
public void queryTask(Entity entity){
-
Data data = doPost();
-
entity.setData(data);
-
}
-
-
}
Service层循环调用
-
public
class Service {
-
-
@Autowired
-
private AsyncTask asyncTask;
-
@Autowired
-
private EntityMapper mapper;
-
-
public List<Entity> queryData(){
-
-
List<Entity> list = mapper.selectAll();
-
for(Entity entity:list){
-
asyncTask.queryTask(entity);
-
}
-
-
return list;
-
}
-
}
这样就实现了异步请求接口,效率上提升了很多。但是,由于异步调用的原因,数据还没填充完就会返回,这显然不是我们想要的效果。我们必须等待AsyncTask中的所有线程结束后,再返回当前调用线程任务的方法。于是就想到了JDK1.5版本后提供的计数器CountDownLatch(至于CountDownLatch的用法本文不阐述,只是第一次使用记录一下,有错误的地方还希望大家给建议)。
思路:
在Service层的方法中实例化CountDownLatch并且制定线程个数,线程个数就是从本地数据库查询的list的长度,并且传入线程任务中,每个线程执行完毕就调用countDown()方法。最后在Service层中调用await()方法。这样在线程计数为零之前,Service的线程就会一直等待。
Service:
-
public
class Service {
-
-
@Autowired
-
private AsyncTask asyncTask;
-
@Autowired
-
private EntityMapper mapper;
-
-
public List<Entity> queryData(){
-
-
List<Entity> list = mapper.selectAll();
-
CountDownLatch latch =
new CountDownLatch(list.size());
-
for(Entity entity:list){
-
asyncTask.queryTask(entity,latch);
-
}
-
latch.await();
-
return list;
-
}
-
}
AsyncTask:
-
@Component
-
public
class AsyncTask {
-
-
-
/**
-
* 异步调用第三方接口查询
-
*/
-
@Async
-
public void queryTask(Entity entity,CountDownLatch latch){
-
Data data = doPost();
-
entity.setData(data);
-
latch.countDown();
-
}
-
-
}
至此问题解决。