分布式链路追踪 SkyWalking 源码分析 —— Agent DictionaryManager 字典管理

分布式链路追踪 SkyWalking 源码分析 —— Agent 收集 Trace 数据 点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析... 阅读详情

点击上方“芋道源码”,选择“设为星标”

做积极的人,而不是积极废人!

源码精品专栏

 

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/agent-dictionary/ 「芋道源码」欢迎转载,保留摘要,谢谢!

  • 1. 概述

  • 2. Collector 同步相关 API

    • 2.1 应用的同步 API

    • 2.2 操作的同步 API

  • 3. Agent 调用同步 API

    • 3.1 DictionaryManager

    • 3.2 PossibleFound


1. 概述

本文主要分享 Agent DictionaryManager 字典管理。先来简单了解下字典的定义和用途:

  • 字典实际上是一个 Map 映射。目前 Agent 上有两种字典:应用编码与应用编号的映射,操作名与操作编号的映射。

    • 应用的定义:例如,Tomcat 启动的应用,或者程序里访问的 MongoDB 、MySQL 都可以认为是应用。

    • 操作的定义:例如,访问的 URL 地址,Mongo 的执行操作。

  • Agent 在每次上传调用链路 Segment 给 Collector 时,Segment 里面需要包含应用和操作相关信息。考虑到减少网络流量,应用编号少于应用编号,操作编号少于操作名。

Agent 字典,会定时从 Collector 【同步】需要( 需要的定义,下文代码会看到 )的字典。

下面,我们分成两个小节,分别从 API 的实现与调用,分享代码的具体实现。

2. Collector 同步相关 API

Collector 同步相关 API 相关有四个接口:

  • 2.1 应用的同步 API

  • 2.2 操作的同步 API

API 处理的流程大体如下:

2.1 应用的同步 API

应用的同步 API ,实际使用的是应用的注册 API,在 「2.1 应用的注册 API」 有详细解析。

2.2 操作的同步 API

我们先来看看 API 的定义,DiscoveryService ,如下图所示:

整体代码和 「2.1 应用的同步 API」 非常相似,所以本小节,更多的是提供代码的链接地址。

2.2.1 ServiceNameDiscoveryServiceHandler#discovery(…)

ServiceNameDiscoveryServiceHandler#discovery(ServiceNameCollection, StreamObserver<ServiceNameMappingCollection>),根据操作名数组,查找操作编号数组。

2.2.2 IServiceNameService#getOrCreate(…)

org.skywalking.apm.collector.agent.stream.service.register.IServiceNameService,继承 Service 接口,操作名服务接口。

  • 定义了 `#getOrCreate(applicationId, serviceName)` 接口方法,根据应用编号 + 操作名字,获取或创建操作名( ServiceName ),并获得操作编号。

org.skywalking.apm.collector.agent.stream.worker.register.ServiceNameService ,实现 IServiceNameService 接口,操作名服务实现类。

  • 实现了 `#getOrCreate(applicationId, serviceName)` 方法。

2.2.3 Graph#start(ServiceName)

在 #createServiceNameRegisterGraph() 方法中,我们可以看到 ServiceName 对应的 Graph<ServiceName> 对象的创建。

  • `org.skywalking.apm.collector.agent.stream.worker.register.ServiceNameRegisterRemoteWorker`,继承 AbstractRemoteWorker 抽象类,操作名注册远程 Worker 。

  • `org.skywalking.apm.collector.agent.stream.worker.register.ServiceNameRegisterSerialWorker`,继承 AbstractLocalAsyncWorker 抽象类,异步保存应用 Worker 。

    • 相同于 Application ,ServiceName 的操作编号,从 `"1"` 双向递增。

    • ServiceNameEsRegisterDAO#save(ServiceName)

2.2.4 ServiceName

org.skywalking.apm.collector.storage.table.register.ServiceName ,操作名。例如记录在 ES 如下图:

3. Agent 调用同步 API

在 《SkyWalking 源码分析 —— 应用于应用实例的注册》「3. Agent 调用注册 API」 一文中,在 【第 170 至 173 行】的代码,我们可以看到,AppAndServiceRegisterClient 会定时从 Collector 同步所有字典信息。

3.1 DictionaryManager

org.skywalking.apm.agent.core.dictionary.DictionaryManager ,字典管理器。目前管理有两种字典:

  • ApplicationDictionary

  • OperationNameDictionary

3.1 ApplicationDictionary

org.skywalking.apm.agent.core.dictionary.ApplicationDictionary ,应用字典。

  • INSTANCE 枚举属性,单例。

  • applicationDictionary 属性,应用编码与应用编号的映射。

  • unRegisterApplications 属性,未知应用编码集合。Agent 会定时从 Collector 同步。这也是文章开头说的,“需要”的定义。

#find(applicationCode) 方法,根据应用编码,查询应用编号。

  • 第 57 行:根据应用编码,从 applicationDictionary 中,查询应用编号。

  • 第 58 至 59 行:当应用编号查找到时,返回 Found 。Found 会在下文详细解析。

  • 第 61 至 64 行:当应用编号查找不到时,添加到 unRegisterApplications 中,返回 NotFound 。NotFound 会在下文详细解析。

#syncRemoteDictionary(ApplicationRegisterServiceGrpc.ApplicationRegisterServiceBlockingStub)方法,调用 「2.1 应用的同步 API」 ,从 Collector 同步 unRegisterApplications 对应的应用编号集合。

3.2 OperationNameDictionary

org.skywalking.apm.agent.core.dictionary.OperationNameDictionary ,操作名字典。

和 ApplicationDictionary 基本类似,胖友点击 代码 ,自己阅读理解。

3.2 PossibleFound

在分享 PossibleFound 之前,我们先来看一段代码,了解该类的意图:

  • 我们在使用 XXXXDictionary#find(xxx) 方法时,返回的会是 Found 或者 NotFound 。这两个类本身是互斥的,并且继承 PossibleFound 。在 PossibleFound 提供 #doInCondition(method01, method02) 方法,优雅的处理两种情况。

org.skywalking.apm.agent.core.dictionary.PossibleFound ,抽象类,代码如下:

  • found 属性,是否找到。

  • value 属性,找到的结果。

  • org.skywalking.apm.agent.core.dictionary.Found 实现 PossibleFound 类,found = true 并且 value 为找到的值。

  • org.skywalking.apm.agent.core.dictionary.NotFound 实现 PossibleFound 类,found = false 并且 value 不赋值。

  • `#doInCondition(Found, NotFound)` 方法,根据查找结果,执行不同的逻辑,【无返回】。

    • 第一个参数,`PossibleFound.Found` 接口,Found 时的处理逻辑接口。

    • 第二个参数,`PossibleFound.NotFound` 接口,NotFound 时的处理逻辑接口。

  • `#doInCondition(FoundAndObtain, NotFoundAndObtain)` 方法,根据查找结果,执行不同的逻辑,【有返回】。

    • 第一个参数,`PossibleFound.FoundAndObtain` 接口,Found 时的处理逻辑接口。

    • 第二个参数,`PossibleFound.NotFoundAndObtain` 接口,NotFound 时的处理逻辑接口。



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

已在知识星球更新源码解析如下:


如果你喜欢这篇文章,喜欢,转发。

生活很美好,明天见(。・ω・。)ノ♡

芋道框架万字详解(前后端分离)、若依框架、yudao-cloud保姆级攻略 芋道开发框架,低代码平台 阅读详情

相关推荐

【高分子材料工程】嵌件注塑结构设计与工艺优化:金属-塑料复合件界面强度及失效预防技术规范

内容概要:本文系统阐述了嵌件注塑(Insert Molding)的设计参数、模具关键技术及失效预防措施,聚焦黄铜H62或304不锈钢与PA66-GF30材料组合的基准工况,提供可用于工程图纸、DFM检查、模具验收和工艺规程的量化依据。内容涵盖工艺边界界定、材料匹配与界面力学分析、结构设计参数(如包覆壁厚、滚花、倒角)、模具设计要点(定位、浇口、排气、冷却)、工艺参数窗口、八大失效模式及其对策、验证验收标准以及量产控制要求,强调通过DFM仿真、模流分析和DOE试模优化工艺,并列出常见设计误区与纠正方案。; 适合人群:从事注塑产品设计、模具开发、工艺工程及质量管理的工程技术人员,尤其适用于汽车、电子、医疗等行业中具备1-3年及以上相关经验的研发人员; 使用场景及目标:①指导嵌件注塑零件的可制造性设计与结构优化;②支持模具设计评审与验收;③制定试模调机与量产工艺规范;④开展失效分析与质量改进; 阅读建议:此资源兼具理论机制与工程实践,建议结合实际项目对照查阅,重点关注包覆壁厚、预热温度、浇口布置等关键参数的取值边界,并在应用非基准材料时进行线膨胀系数与收缩率的换算修正,避免直接套用数据。

skywalking 沉了一年的线程池插件 bug 被我解决了

点击上方“芋道源码”,选择“设为星标”管她前浪,还是后浪?能浪的浪,才是好浪!每天 10:33更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2021超神之路,很肝~中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 RocketMQ 源码解析数据库中间件 Sharding-JDBC 和 MyCAT 源码解析作业调度中间件 E...

芋艿V 687

智慧医共体AI大模型赋能智能体平台及AI场景应用规划方案(决策评审版).pptx

智慧医共体AI大模型赋能智能体平台及AI场景应用规划方案(决策评审版).pptx

python字典(dictionary)中get和items、iteritems方法

dictionary Python内置了字典:dict的支持,dict全称dictionary,在其他语言中也称为map,使用键-值(key-value)存储,具有极快的查找速度。 值得注意的是,由于一个key只能对应一个value,所以,多次对一个key放入value,后面的值会把前面的值覆盖。 #dict的初始化 key-value &gt;&gt;&gt;dic = {‘1’:‘one...

Chaolei3的博客 3596

AI政务大模型数字人平台规划方案(生态合作版).pptx

AI政务大模型数字人平台规划方案(生态合作版).pptx

14-15日周末听写音频.mp3

14-15日周末听写音频.mp3

链路追踪 SkyWalking 源码分析 —— 调试环境搭建

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏 中文详细注释的开源项目消息中间件 RocketMQ 源码解析数据库中间件 Sharding...

芋道源码 692

图腾柱无桥PFC变换器+平均电流控制+PI电压双闭环前馈控制设计(Simulink仿真实现)

内容概要:本文系统研究了图腾柱无桥PFC变换器的高效率控制策略,采用平均电流控制结合PI电压双闭环前馈控制,利用Simulink平台构建完整的系统仿真模型,涵盖主电路拓扑、控制环路设计、关键参数计算及动态性能验证。研究重点在于提升功率因数、降低输入电流谐波含量,并确保输出电压的高度稳定性。通过仿真分析,全面评估了系统在启动、稳态运行及抗干扰等方面的性能表现,充分展现了现代电力电子变换器在高效能、高可靠性方面的先进控制技术应用; 适合人群:具备一定电力电子技术基础和Simulink仿真能力的电气工程及相关专业的研究生、科研人员及企业研发工程师; 使用场景及目标:①研究高效率PFC变换器的控制策略;②掌握图腾柱无桥PFC电路的工作原理与建模方法;③开展新能源、电动汽车充电、工业电源等领域中高性能整流器的技术开发与性能优化; 阅读建议:建议读者结合Simulink仿真模型同步操作,重点关注控制环路的设计细节与参数整定过程,深入理解平均电流控制与双闭环前馈控制的协同机制,同时可拓展至不同工况下的性能测试以增强工程实践能力。

SkyWalking 源码分析 —— Agent DictionaryManager 字典管理

本文介绍了分布式链路追踪系统中的字典管理器(DictionaryManager)设计与实现。该系统通过将高频字符串映射为整型ID,实现数据压缩、内存优化和序列化效率提升。采用分层架构设计,包含本地缓存、同步管理和持久化三层。核心功能包括字典查找、同步和持久化机制,支持LRU缓存淘汰、分段锁优化和无锁读取。系统具备完善的容错处理(重试机制、降级策略)和性能监控能力,通过批量同步和缓冲区优化减少IO开销。该设计在保证功能完整性的同时,显著提升了系统性能和可靠性,适用于大规模分布式环境下的链路追踪场景。

油墨香^-^的博客 801

V2G电动汽车ACDC整流+双向CLLC谐振变换器充放电仿真(Simulink仿真实现)

内容概要:本文详细介绍了基于Simulink的V2G电动汽车ACDC整流与双向CLLC谐振变换器充放电仿真系统的设计与实现。该系统融合了AC-DC整流技术与高效的双向CLLC谐振变换器,实现了电动汽车与电网之间的能量双向流动,既支持电网向车辆充电(G2V),也支持车辆向电网放电(V2G),显著提升了电网的灵活性、稳定性与能源利用效率。文章深入阐述了系统的拓扑结构、工作原理、关键参数设计及变频控制策略,并通过完整的仿真模型构建与实验验证,证明了该方案在充放电过程中的高效率、平滑的功率转换特性以及优良的动态响应性能。此外,文中还系统性地列举了多种相关电力电子变换器(如LLC、PFC、Buck-Boost等)及其先进控制技术(如双闭环、模型预测、下垂控制等)的应用实例,充分展现了该领域深厚的技术背景与广阔的发展前景。; 适合人群:电气工程、自动化、电力电子与电力传动及相关专业的研究生、科研人员及工程师,特别是从事新能源汽车、智能电网、电力电子变换器设计与控制、储能系统集成等方向的专业人士。; 使用场景及目标:①为V2G(Vehicle-to-Grid)技术的深入研究与工程化应用提供坚实的理论依据和技术支持;②为各类高频高效电力电子变换器(尤其是谐振类变换器)的建模、设计与控制优化提供极具参考价值的案例;③推动新能源汽车与智能电网的深度融合,促进清洁能源的消纳与能源互联网的建设。; 阅读建议:读者应具备扎实的电力电子学、自动控制理论基础以及Simulink/Matlab软件的操作能力。建议结合具体工程项目需求,深入理解文中的系统架构与控制算法,并动手实践仿真模型的搭建与调试,以加深对V2G能量管理机制的理解。同时,鼓励读者进一步探索文中未深入探讨的边界工况,如极端环境下的系统可靠性、长期运行的耐久性以及大规模V2G集群对电网的综合影响等前沿课题。

SpringBoot与Flowable整合:构建高效审批工作流的实战指南

本文是一份SpringBoot与Flowable整合构建高效审批工作流的实战指南。通过一个经典的二级审批场景,详细介绍了从项目搭建、BPMN流程设计、核心服务编写到RESTful API构建的完整步骤。文章深入探讨了如何利用Flowable工作流引擎实现审批流程的自动化驱动与灵活管理,并分享了变量管理、监听器、异步执行等进阶技巧与常见避坑指南,帮助开发者快速构建健壮、可维护的企业级审批系统。

qsc9012345的博客 524

java 字典_链路追踪SkyWalking源码分析——AgentDictionaryManager字典管理

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/agent-dictionary/ 「芋道源码」欢迎转载,保留摘要,谢谢!1. 概述2. Collector 同步相关 API2.1 应用的同步 API2.2 操作的同步 API3. Agent 调用同步 API3.1 DictionaryManager3.2 PossibleFound1. 概述本文主要分享 Ag...

weixin_39612057的博客 238

PCIe中ACS知识小记

虚拟机内部的访问数据显而易见是带的GPA地址。而目前几乎所有的PCIe 设备都带ACS control,所以它们可以单独assign给不同的VM,但是随之而来的就是即使两个GPU同时assign给同一个VM,由于ACS的存在,他们之间也不会有真正的物理层面的P2P访问。每一个TLP都自带一个address(寻址类TLP),同时每一个endpoint,PCIe switch都自带一段BIOS配置的地址空间范围,一旦这个TLP的address落入某个设备的地址范围,那么这个TLP就属于这个设备并消费。

Summer的博客 5080

Skywalking与Zipkin源码解读

SkyWalking源码解读:http://www.iocoder.cn/categories/SkyWalking/Zipkin源码解读:http://www.iocoder.cn/categories/Zipkin/

zjttlance的专栏 1746

Transformer论文解读

Transformer有多牛逼不用多说,时隔7年我们再来看看论文原文,看看这篇深刻改变世界的文章都说了什么。当然逐字逐句解读已经意义不大,我们只列考点。

xian0710830114的专栏 4407

AutoSAR MemMap模块详解及使用注意事项

在本文中,我们将深入探讨MemMap模块的实例解析,并介绍在使用该模块时需要注意的一些事项。在上述代码中,我们使用了MEMMAP_START_SEC_VAR_32BIT和MEMMAP_START_SEC_CODE来定义MemMap区域的起始位置,使用MEMMAP_STOP_SEC_VAR_32BIT和MEMMAP_STOP_SEC_CODE来定义MemMap区域的结束位置。1.合理划分MemMap区域:根据实际需求,合理划分MemMap区域,将不同类型的变量放置在不同的区域中,以便于管理和访问。

weixin_50547796的博客 2534

链路追踪 SkyWalking 源码分析 —— Collector Storage 存储组件

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析...

芋道源码 1036

【无人机路径规划】基于强化学习实现多无人机路径规划

【无人机路径规划】基于强化学习实现多无人机路径规划

k8291121的博客 1659

如何使用 SkyWalking 给 Dubbo 服务做链路追踪?

点击上方“芋道源码”,选择“置顶公众号”技术文章第一时间送达!源码精品专栏 精尽 Dubbo 原理与源码 69 篇精尽 Netty 原理与源码 61 篇中文详细注释的开源...

芋道源码 5806

交通仿真软件:SUMO_(13).Python脚本与TraCI接口

通过TraCI接口,用户可以实现与SUMO仿真器的实时交互,获取和控制交通数据。本文档详细介绍了如何使用Python脚本与TraCI接口进行交互,包括基本的设置、数据获取和控制方法。此外,还展示了几个高级应用示例,如交通流优化、多代理系统、车辆路径规划和车辆行为模拟。这些示例可以帮助用户更好地理解如何利用TraCI接口进行复杂的交通仿真和分析。希望这些内容对您有所帮助,如果您有任何问题或需要进一步的帮助,请参考SUMO的官方文档或社区支持。

kkchenjj的博客 1010

基于ResNet + LLM大语言模型的分类识别系统设计与实现,Web前后端分离,Django+vue3+AI助手模块+ResNet50算法+LLM 联动+Element Plus等技术,全网独发

分类识别任务是计算机视觉中的重要任务,广泛应用于智慧校园分类、智慧农业、智慧生活场景分类等领域。常见的分类模型有 VGGNet、ResNet 、MobileNet 、ConvNeXt、DenseNet、ViT、Swin Transformer、YOLOv8/11/26。本项目结合 ResNet分类识别算法 + LLM大语言模型联动 ,使用 Django + Vue3,构建了一个通用的 Web 前后端系统,用户端 + 管理端 ,便于用户操作检,不仅可以用于大论文的工作量展示,还可以作为毕业设计。

在职AI算法工程师,擅长计算机视觉,YOLO目标检测、分割等,擅长web、pyqt界面可视化,好内容持续更新中,来这里跟大家一起学习,共同进步 765

skywalking 启动流程(一)

skywalking collector 整体代码比较清晰,采用模块化开发。 启动模块server-starter,此模块代码十分简单,主要实现了加载配置,并启动各个模块的功能。 OAPServerStartUp 该类是这个程序的入口。   public static void main(String[] args) { //配置文件 Applicati...

wangyang_software的专栏 1万+

灰度图像采集显示

灰度图像采集显示 在FPGA内部,采集到的视频数据线通过一个FIFO,将原本与25MHZ时钟同步的数据流转换到FPGA内部50MHZ的时钟。接着将这个数据再送入写DDR3缓存的异步FIFO中,这个FIFO中的数据一旦达到一定数量,就会被写入DDR3中。于此同时,使用另一异步FIFO缓存从DDR3读出的图像数据;LCD驱动模块不断地发出读图像数据请求给到这个FIFO,从中读取图像数据并送给VGA显示器进行实时图像的显示。 ...

小柚子的博客 485

skywalking 5.X 分布式链路跟踪 使用笔记

2019独角兽企业重金招聘Python工程师标准>>> ...

weixin_33834628的博客 2020

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

分布式链路追踪 SkyWalking 源码分析 —— Collector 初始化

本文主要基于 SkyWalking 3.2.6 正式版 1. 概述 2. CollectorBootStartUp 2. ApplicationConfigLoader 3. ModuleManager 3.1 Module 3.2 ModuleProvider 3.3 Service 3.4 Boot...

qiujiavip的博客 386

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

上一篇: 为什么培训班出来的程序员总遭人嫌弃?
下一篇: 关于 CPU 的一些基本知识总结
公众号-芋道源码
博客等级 码龄10年 1638粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值