最近在对服务集群的性能调优过程中遇到了些麻烦,一些业务流程下来经过了多个业务服务,流程比较复杂,性能死活上不去,上万的并发抓包不现实,系统的消息跟踪的能力又还比较弱,分析业务瓶颈点变得很困难。于是就在想怎么把一个请求对所有资源的访问过程和时间全部记录下来,并把请求在各服务间的操作流程也串起来,这样很容易就找到瓶颈点了。
想法虽好,但现实很残酷,框架和资源操作都是开源库,找到代码出入口发现封装的比较深,即使能修改重编也比较麻烦,而且通用性差。思来想去,最后利用javassist的Java字节码修改机制,设计了一个对类方法环绕切面的功能,再结合tomcat类加载机制和线程变量功能(方便汇总记录一次请求的资源访问),没有改动任何源代码还达到了之前想要的效果。当然最后瓶颈点也很轻松就被发现了。主要思路如下:
该部分代码已上传github:https://github.com/litmonk/jsaspectj。