查漏补缺,架构之dubbo 调用埋点(推荐收藏)

本文详细解析了Dubbo的调用过程,包括消费者调用端和提供者处理线程的埋点实现,旨在捕捉调用信息、传递TraceRequest、开启监控会话。通过对Dubbo源码的分析,确定了在`DubboInvoker.doInvoke()`和`FutureFilter.invoke()`处进行消费者端埋点,提供者端则在`EchoFilter`进行埋点。同时,文章还探讨了Servlet处理埋点,建议在`HttpServlet.service`方法中进行字节码插桩以拦截HTTP请求,并介绍了Redis调用埋点的不同方案。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

来源:IT故事会

原文链接:https://idig8.com/2019/07/18/hulianwangjiagoudubbo-diaoyongmaidian114/

 

####(一)Dubbo执行过程

对于dubbo的埋点,首先要了解dubbo的执行过程

 

节点角色说明Provider暴露服务的服务提供方Consumer调用远程服务的服务消费方Registry服务注册与发现的注册中心Monitor统计服务的调用次数和调用时间的监控中心Container服务运行容器

  • Dubbo调用过程

 

  •  
  • 消费者调用过程

 

  •  

(二)调用端埋点实现

  • 埋点目的
  • 1.捕捉消费者调用信息(远程接口、URL、参数、用时、返回结果、异常)
  • 2.传递TraceRequest
  • 调用信息模型表结构

名称类型描述servicePathstring服务路径serviceNamestring服务inParamjson返回结果outParamjson返回结果ErrorMessagestring异常信息ErrorStacktext异常堆栈ResultStatestring执行状态beginTimedate开始时间endTimedate结束时间addressIpstring远程IPfromIpstring调用者IP

  • 埋点位置
  • 如何才能完整的捕捉到以上信息呢?那么就需要了解Dubbo内部的调用
  • 1.分解调用过程为多个步骤。
  • 2.这些步骤分别是在哪些协作线程上完成的?
  • 3.经过了哪些方法?
  • 4.经过了哪些过滤器?
  • 调用过程分解&线程协作

 

  •  
  1. 选择断点位置Debug调试调用过程
  2. 消费者调用线程源码分析:

 

  1.  
  • 经过对源码的分析,埋点的位置如下:
  • DubboInvoker.doInvoke()
  • FutureFilter.invoke()
  • DubboInvoker.doInvoke() 方法最靠近调用方,异常捕捉范围较大,但是该位置无法通过Attachment 向下传递TraceRequest 参数,所以需要FutureFilter.invoke() 进行补充,其具体分工如下:
  • ·1.DubboInvoker.doInvoke捕获如下信息: 1、开始时间 2、服务路径 3、服务方法 4、输入参数 5、异常信息 6、本地地址
  • 2.FutureFilter.invoke 基于Attachment 向下传递参数 2、异常信息与堆栈 3、返回结果
  • > DubboInvoker.doInvoke拦截源码参见 :com.cbt.agent.collects.dubbo.DubboConsumerRpcExceptionMonitorHandle#invokerBefore

FutureFilter.invoke拦截源码参见 :

com.cbt.agent.collects.dubbo.DubboConsumerMonitorHandle#invokerBefore

(三)调用端埋点实现

  • 埋点目的
  • 接收TraceRequest信息 ,并创建会话

 

  • 埋点位置:
  • 相对调用广方接收方埋点目的较简单,但同样需分析源码找准埋点位置
  • 提供者处理线程分析

 

  •  

经分析埋点位置选在离实际调用方法较远的EchoFilter过滤器理由是捕捉的信息更全面。

具体会话开启过程:

1. 基于Attachment获取TraceId、ParentId、TraceProperties。

2. 封装TraceRequest ,并此为参数开启会话。

3. 在调用结束时关闭会话。

具体源码参见:com.cbt.agent.collects.dubbo.DubboProviderMonitorHandle#invokerBefore

 

(二)Servlet处理埋点

  • Servlet埋点目的
  • 1.生成TraceId
  • 2.开启关闭监控会话
  • 3.捕捉Http请求(url、客户端IP、参数、响应时长、响应状态码)
  • 埋点埋在哪?
  • 1.每一个Control方法
  • 2.DispatcherServlet.doDispatch方法
  • 3.HttpServlet.service 方法
  • 方案对比

方案优点缺点应用层Control类简单,风险因素低判别成本高,有局限性,只能根据 HttpServlet 子类或@RequestMapping进行识别。DispatcherServlet.doDispatch简单,适应性强1、只能针对spring mvc 项目 2、spring boot 项目不支持HttpServlet.service适应性强,与应用层和框架无关1、不同的容器ClassPath不一样,存在兼容性问题。 2、存在风险,几乎所有请求都会经过此方法 3、业务异常无法捕获

总合比较还是选择 HttpServlet.service 会更好些。

  • HttpServlet.service 埋点需要做的工作:
  • 1.字节码插桩
  • 2.请求拦截并获取请求信息
  • 字节码插桩流程
  • 字节码插是指在数据装载前在HttpServlet.service 插入监控指令,以拦截Http请求,其插桩的过程。

 

请求拦截是指具体Http请求过来时进行拦截过滤,这么做主要是为了完成两个目的

1.开启监控会话

2.开启对Servlet响应过程的监控

 

 

(三)Redis 调用埋点

 

  • 埋点可选方案

方案优点缺点埋点jedis 类Get、Set等API方法简单直接工作量大,方法较多、需要了解每个方法特性埋点 Connection sendCommand方法全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果埋点 Protocol全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果

 

PS:源码中可以查看DevelopBootMain类,我看这代码也看了2天,原来老写业务代码,看看这确实很容易懵X,确实这才是有技术含量的代码。其实有没有技术含量不太重要,重要是的有没有商业价值。

Doe 发布 [V1.0.0] 前段时间排某问题的时候,想要快速知道某些dubbo接口(三无)的响应结果,但不想启动项目(因为这些项目不是你负责的,不会部署而且超级笨重),也不想新建一个dubbo客户端项目(占地方),也不想开telnet客户端连接口(麻烦而且有限制)。所以扣了dubbo的netty模块源码,封装了个收发客户端集成一个工具,可以快速调试dubbo接口。源码地址:https://github.com/VIPJoey/doe 极简模式 普通模式 目录结构 mmc-dubbo-api 接口项目,主要用于测试。 mmc-dubbo-provider dubbo提供者项目,主要用于测试。 mmc-dubbo-doe 主项目,实现dubbo接口调试。 deploy 部署文档 功能特性 极简模式:通过dubbo提供的telnet协议收发数据。 普通模式:通过封装netty客户端收发数据。 用例模式:通过缓存数据,方便下一次操作,依赖普通模式。 增加依赖:通过调用maven命令,下载jar包和热加载到系统,主要用来分析接口方法参数,主要作用在普通模式。 依赖列表:通过分析pom文件,展示已经加载的jar包。 其它特性 springboot 整合 redis,支持spring el 表达式。 springboot 整合 thymeleaf。 springboot 整合 logback。 netty rpc 实现原理。 开发环境 jdk 1.8 maven 3.5.3 dubbo 2.6.1 lombok 1.16.20 idea 2018 windows 7 安装步骤 安装jdk 安装maven,并设置好环境变量,仓库目录。 进入mmc-dubbo-api目录,执行mvn clean install命令,省api的jar包。 进入mmc-dubbo-doe目录,执行mvn clean install 命令,在target目录生成dubbo-doe-1.0.0-RELEASE.jar 在F盘(可以任意盘)创建目录F:\app\doe 把dubbo-doe-1.0.0-RELEASE.jar拷贝到F:\app\doe 把deploy目录中的所有文件拷贝到F:\app\doe 如果您电脑安装了git bash,可以在bash窗口运行 ./deploy.sh start,否则如果没有安装git bash,只能打开cmd切换到F:\app\doe目录,然后执行java -jar dubbo-doe-1.0.0-RELEASE.jar --spring.profiles.active=prd 打开浏览器,访问地址:http://localhost:9876/doe/home/index 全剧终
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值