分布式追踪 & APM 系统 SkyWalking 源码分析 —— Collector Server Component 服务器组件

SkyWalking环境搭建与使用 阅读详情

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/collector-server-component/ 「芋道源码」欢迎转载,保留摘要,谢谢!

本文主要基于 SkyWalking 3.2.6 正式版


������关注微信公众号:【芋道源码】有福利:
1. RocketMQ / MyCAT / Sharding-JDBC 所有源码分析文章列表
2. RocketMQ / MyCAT / Sharding-JDBC 中文注释源码 GitHub 地址
3. 您对于源码的疑问每条留言都将得到认真回复。甚至不知道如何读源码也可以请教噢。
4. 新的源码解析文章实时收到通知。每周更新一篇左右。

> 5. 认真的源码交流微信群。

1. 概述

本文主要分享 SkyWalking Collector Server Component 服务器组件。Collector 通过服务器,提供 API 接口给调用方,例如 Agent 、WebUI 。

Server Component 在 SkyWalking 架构图处于如下位置( 红框 ) :

FROM https://github.com/apache/incubating-skywalking

下面我们来看看整体的项目结构,如下图所示 :

OK,我们从接口到实现的顺序进行分享。

2. 接口

2.1 Server

org.skywalking.apm.collector.server.Server ,服务器接口。其实现子类,如下类图 :

#hostPort() 接口方法,获得服务器地址。
#serverClassify() 接口方法,获得服务器分类。

#initialize() 接口方法,初始化服务器。
#start() 接口方法,启动服务器。

#addHandler() 接口方法,添加请求处理器( ServerHandler )

2.2 ServerHandler

org.skywalking.apm.collector.server.ServerHandler ,服务器处理器接口。其实现子类,如下类图 :

ServerHandler 无任何接口方法。

一个 ServerHandler 对应一个请求的处理。

3. gRPC 实现

3.1 GRPCServer

org.skywalking.apm.collector.server.grpc.GRPCServer ,基于 gRPC 的服务器实现。

#hostPort() 实现方法,获得服务器地址。
#serverClassify() 实现方法,获得服务器分类为 "Google-RPC"。

#initialize() 实现方法,调用 io.grpc.netty.NettyServerBuilder#forAddress(address) 方法,NettyServerBuilder 。此处,服务器并未创建与启动。
#start() 实现方法,创建 io.grpc.Server 对象,并启动服务器。

#addHandler(handler) 实现方法,调用 NettyServerBuilder#addService(...) 方法,添加 gRPC 请求处理器( GRPCHandler )。

目前,GRPCServer 使用在 collector-agent-grpc-provider / collector-remote-grpc-provider 项目。

3.2 GRPCHandler

org.skywalking.apm.collector.server.grpc.GRPCHandler ,gRPC 请求处理器接口。其实现子类,如下类图 :

GRPCHandler 无任何接口方法。

4. Jetty 实现

3.1 JettyServer

org.skywalking.apm.collector.server.jetty.JettyServer ,基于 Jetty 的服务器实现。

#hostPort() 实现方法,获得服务器地址。
#serverClassify() 实现方法,获得服务器分类为 "Jetty"。

#initialize() 实现方法,创建 org.eclipse.jetty.server.Server 和 org.eclipse.jetty.servle.ServletContextHandler 对象。此处,服务器并未启动。
#start() 实现方法,启动服务器。

#addHandler(handler) 实现方法,使用 ServerHandler 创建 org.eclipse.jetty.servlet.ServletHolder 对象,并调用 ServletContextHandler#addServlet(servlet, pathSpec) 方法进行添加。

目前,JettyServer 使用在 collector-agent-jetty-provider / collector-ui-jetty-provider 项目。

3.2 JettyHandler

org.skywalking.apm.collector.server.jetty.JettyHandler ,继承 javax.servlet.http.HttpServlet 抽象类,Jetty 请求处理。

#pathSpec() 抽象方法,请求路径定义。

#doGet(HttpServletRequest) 抽象方法,处理 Get 请求,并返回 com.google.gson.JsonElement 对象。

#doPost(HttpServletRequest) 抽象方法,处理 Post 请求,并返回 com.google.gson.JsonElement 对象。

HttpServlet 所有方法被重写,并标记 final 修饰符,不允许子类重写。

666. 彩蛋

知识星球

又双叒叕成功更新了一篇水文。��

胖友,分享个朋友圈可好?


������关注微信公众号:【芋道源码】有福利:
1. RocketMQ / MyCAT / Sharding-JDBC 所有源码分析文章列表
2. RocketMQ / MyCAT / Sharding-JDBC 中文注释源码 GitHub 地址
3. 您对于源码的疑问每条留言都将得到认真回复。甚至不知道如何读源码也可以请教噢。
4. 新的源码解析文章实时收到通知。每周更新一篇左右。
5. 认真的源码交流微信群。

skywalking从入门到精通(一)-环境搭建 skywalking从入门到精通(一)-环境搭建。 阅读详情

相关推荐

skywaking 日志, 通过log4j2+grpc

【代码】skywaking 日志, 通过log4j2+grpc。

我引源,你思考 1357

SkyWalking 针对 gRPC 的负载均衡和自动扩容实践

在 Apache SkyWalking 中,OAP 通过 SkyWalking Agent、Envoy 或其他数据源获得指标、追踪、日志和事件数据。在 gRPC 协议下,通过与各个系统服务器进行来传输数据。当它连接通信生态时,当流量的服务在添加时,或者由于增加了 OAP 服务的流量负载高位时,OAP 集群使之增加了。所有的代理已经连接到以前的节点,由于这些新的 OAP 节点的负载率会很小。即使没有扩展,OAP 节点的负载率也不会平衡,因为比较代理会启动阶段的经常策略而保持连接。在现有的在这种情况下,保持所有

大海技术博客 2290

linux的grpc扩展,skywalking需要的

skywalking需要的 grpc扩展包

10 分钟快速搭建 SkyWalking 服务

它能够追踪分布式系统中各个服务之间的调用链路。例如,在一个由多个微服务组成的电商系统中,当用户下单后,订单服务会调用库存服务、支付服务等。SkyWalking 可以记录从用户请求开始,经过各个服务的完整调用路径,包括每个服务的处理时间、请求参数和返回结果等信息。这有助于开发者快速定位系统中性能瓶颈和故障点。对于跨进程、跨主机甚至跨数据中心的服务调用,SkyWalking 都可以准确地进行追踪。

虚构规律,寰宇笑谈 2684

RT-Thread stm32h7使用串口DMA

stm32h7在rtthread中无法使用串口DMA,通过更改驱动代码使其支持串口DMA

qq_35141454的博客 2288

Multisim14安装失败?手把手教你彻底清理残留文件(附专用卸载工具)

本文针对Multisim14安装失败问题,提供了一套从根源解决的完整方案。文章详细分析了安装失败的三大元凶——文件残留、注册表残留和隐藏组件,并手把手指导用户使用专用卸载工具进行标准化清理,再结合手动深度清理文件系统和注册表,最终实现彻底卸载和完美重装,有效解决Multisim14安装问题。

weixin_29179311的博客 319

Skywalking环境搭建

默认的Linux限制root用户开启的进程可以开启任意数量的线程,其他用户开启的进程可以开启1024个线程。因为ES至少需要4096的线程池预备。elasticsearch-6.4.0.tar.gz — elasticsearch-6.4的安装包,Skywalking对es版本号有一定要求,最好使用6.3.2以上版本,如果是7.x版本需要额外进行配置。9、然后我们就可以通过浏览器访问Skywalking的可视化页面了,访问地址:http://虚拟机IP地址:9080,如果出现下面的图,就代表安装成功了。

mry6的博客 2244

从2D到3D地图开发:手把手教你用Cesium+Three.js实现卫星轨迹可视化(含代码片段)

本文详细介绍了如何结合Cesium与Three.js实现从2D到3D的卫星轨迹可视化。通过对比传统Web GIS框架的局限,阐述了Cesium处理三维地理与轨道数据、Three.js负责高级图形渲染的分工优势,并提供了从环境搭建、坐标同步到动态粒子效果实现的完整代码实战指南。

nut55的博客 673

SkyWalking 源码分析 —— Collector Server Component 服务器组件

摘要: SkyWalking Collector作为开源APM系统的核心组件,采用模块化架构设计,包含Agent接收、集群管理、存储抽象等核心模块。其数据处理流程遵循接收→解析→聚合→存储的流水线模式,支持gRPC/HTTP双协议通信,并通过分布式锁、数据分片等机制实现集群管理。存储层抽象支持Elasticsearch等后端,优化了批量写入与索引管理。系统具备完善的容错、监控及扩展能力,包括故障转移、插件机制和配置热更新等特性,通过内存池化、异步处理等技术保障高性能。

油墨香^-^的博客 853

【第33话:车辆控制】自动驾驶车辆运动学模型推导及详解

自动驾驶车辆的运动学模型以自行车模型为核心,通过状态方程。

一碗白开水一 833

SAP 系统和银行系统通过 SM2 加密算法进行集成

SM2 是基于椭圆曲线离散对数问题(ECDLP)的一种公钥密码算法。椭圆曲线加密的核心原理,是利用了一个数学难题:在椭圆曲线群上,已知曲线上两点的运算结果,逆向推导出这两个点的具体信息是非常困难的。这样的复杂度使得基于椭圆曲线的密码体制比传统的 RSA 更加难以破解。在 SM2 加密中,公钥和私钥的生成与传统的椭圆曲线加密类似。选择一个椭圆曲线和一个基点 P。使用私钥 d,计算公钥 P’ = d * P。私钥 d 保密,而公钥 P’ 可公开分发,用于加密数据。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 1213

链路追踪 SkyWalking 源码分析 —— Collector Server Component 服务器组件

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 Ro...

芋艿V 251

QT自制TCP服务器

TCP服务器 网络调试助手

大脑曝光 3628

SkyWalking服务端的搭建、微服务接入SkyWalking

skyWalking是一个国产开源框架,2015年开源,2017年假如Apache孵化器。skyWalking是分布式系统的应用程序性能监视工具,专门为微服务、云原生架构和基于容器(Docker、k8s、mesos)架构而设计。包括了分布式追踪、性能指标分析、应用和服务依赖分析等。官网下载链接Github文档中文文档链路追踪框架对比Zipkin是Twitter开源的调用链路分析工具,目前基于Spingcloudsleuth得到了广泛的应用,特点是轻量,部署简单。PinpointSkywalking。...

qq_44027353的博客 5063

从入门到精通:3D视觉与SLAM实战全流程 mastery 教程

本文系统介绍了3D视觉与SLAM技术的应用前景、核心技术和实战路径。3D视觉通过RGB-D相机、激光雷达等传感器获取环境三维信息,SLAM技术实现自主定位与地图构建,二者结合广泛应用于自动驾驶、机器人导航等领域。文章详细拆解了点云处理、视觉里程计、回环检测等关键技术,并提供了ORB-SLAM2算法复现、语义SLAM开发的实战教程,涵盖硬件选型、环境配置到代码实现全流程。最后规划了从入门到专家的学习路径,推荐了相关书籍、开源项目和数据集资源,为读者掌握这一前沿技术提供了完整指南。

m0_71589036的博客 137

全国区块链职业技能大赛国赛考题前端功能开发

全国区块链职业技能大赛国赛考题区块链应用前端功能开发

本郡主是喵 1335

分布式链路追踪SkyWalking进阶实战之RPC上报和WebHook通知(三)

本篇主要介绍SkyWalking性能剖析,慢业务代码定位以及通知告警

点滴记忆,分享成长之路 2270

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

10_SkyWalking

SkyWalking

xixihaha_coder的博客 869

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

skywalking搭建与使用

前言 在分布式环境中,对于服务的监控与链路追踪变得越来越重要,简单来说,相比单体应用,分布式环境下的服务链路变得更长,问题定位、排查与解决也更加复杂,因此使用一款好的服务监控工具可以为Java开发人员和运维人员大大提升工作效率 目前,对于微服务应用的监控体现在多个维度上,比如应用层的监控,大家熟知的各自restFul接口,数据库层面的监控,比如sql执行,慢查询sql检测,服务链路追踪,比如A服务通过feign调用B服务,B再调C服务等,服务器性能上的监控,比如JVM等相关参数等 以上大概罗列了实际应用中比

congge 7548

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

C#开发OPC DA客户端的服务器状态处理

C#开发OPC DA客户端,最简单的方法是使用OpcRcw.Comn.dll,OpcRcw.Da.dll封装的API进行。如何使用C#开发OPC DA Client程序,网上有很多例子,包括各大自动化厂商和OPC服务器厂商都带有相关的示例,本文仅仅讨论如何处理与OPC服务器的连接状态问题。

yuming的专栏 1885

SkyWalking入门搭建【apache-skywalking-apm-10.0.0】

SkyWalking在Java中使用的是字节方式植入,是完全无代码侵入的VM options 添加,就是刚刚上面下的 java-agentEnvironment variables 添加,指定 SkyWalking的地址效果图操作步骤(idea 2023,其它版本百度操作)配置好后,启动服务会看到下面的日志,就说明 java-agent.jar 读取到了随机访问几下服务的接口,再去刷新SkyWalking 控制台,就可以看到了。

小道仙的后宫 5721

SkyWalking8.7源码解析(四):服务GRPCChannelManager、ServiceManagementClient、CommandService、SamplingService

14、服务-GRPCChannelManager org.apache.skywalking.apm.agent.core.boot.BootService是SkyWalking Agent中所有服务的顶层接口,这个接口定义了一个服务的生命周期,分为prepare、boot、onComplete、shutdown四个阶段 public interface BootService { /** * 准备阶段 * * @throws Throwable */

hxt的博客 3184

2024年最新分布式监控Skywalking安装及使用教程(保姆级教程),大数据开发面试常用算法

我们到bin目录可以看到一些启动脚本,.bat为Windows下使用,.sh为linux/Mac下使用。我们./startup.sh即会启动Skywalking的服务,但是在启动之前我们需要修改一些配置文件。我们vim startup.sh可以看到里面调用了oapService.sh, webappService.sh两个脚本,,用来接收各个服务的监控数据并解析处理存储到数据库中,,用来展示Skywalking的监控数据,图表分析等。

2401_84184729的博客 2124

SkyWalking环境搭建

SkyWalking提供了一个非常友好美观的界面供使用者查看服务链路的拓扑图、链路追踪等,其默认使用的端口为8080,如果8080端口已经被其他应用占用,您就必须要修改webapp目录下的webapp.yml文件的port参数为与其他应用不冲突的其他端口,如图1-17所示。与配置“limits.conf”文件不同,“sysctl.conf”文件在修改后,需要执行“sysctl -p”命令,重新加载配置文件,新的配置项内容才会生效,如图1-9所示。因为目前没有数据,所以仪表盘等内容为空,如图1-19所示。

测试者家园 2381

SkyWalking 介绍及部署

随着微服务架构的流行,一些微服务架构下的问题也会越来越突出,比如一个请求会涉及多个服务,而服务本身可能也会依赖其他服务,整个请求路径就构成了一个网状的调用链,而在整个调用链中一旦某个节点发生异常,整个调用链的稳定性就会受到影响。每条连线的颜色反应了服务之间的调用延迟情况,可以非常直观的看到服务与服务之间的调用状态,连线中间的点能点击,可显示两个服务之间链路的平均响应时间、吞吐率以及SLA等信息。agent 中指定服务名(SW_AGENT_NAME),不同的服务用不同的服务名区分。或者 定时任务重跑批处理。

weixin_44024436的博客 5171
上一篇: 沉思录:一个堕落上进者的自我救赎
下一篇: 数据库历险记(一) | MySQL这么好,为什么还有人用Oracle?
公众号-芋道源码
博客等级 码龄10年 1637粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值