某大型税务系统在Kafka应用中遇到高时延问题，100并发访问时延高达500ms。通过对时延的深入剖析，发现主要问题是入队时延过大。通过优化，成功将时延降低到几十毫秒，满足了业务需求。主要优化点包括入队时延、复制时延和网络传输参数调整。
背景
国内某大型税务系统，业务应用分布式上云改造。
业务难题
如上图所示是模拟客户的业务网页构建的一个并发访问模型。用户在页面点击从而产生一个HTTP请求，这个请求发送到业务生产进程，就会启动一个投递线程（Deliver Thread）调用Kafka的SDK接口，并发送3条消息到DMS（分布式消息服务），每条消息大小3k，需要等待3条消息都被处理完成后才会返回请求响应⑧。当消息达到DMS后，业务消费进程调用Kafka的消费接口把消息取出来，然后将每条消息放到一个响应线程(Response Thread)中进行处理，响应线程处理完后，通过HTTP请求通知投递线程，投递线程收到响应后返回回复响应。
100并发访问时延500ms，未达成用户业务要求
最低0.47元/天 解锁文章
扫一扫
1601
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
