链路追踪 SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(一)

SCTP链路测试工具源码(lksctp-tools) GitHub仓源码备份 立即下载

点击上方“芋道源码”,选择“设为星标”

做积极的人,而不是积极废人!

源码精品专栏

 

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/collector-streaming-first/ 「芋道源码」欢迎转载,保留摘要,谢谢!

本文主要基于 SkyWalking 3.2.6 正式版

  • 1. 概述

  • 2. apm-collector-core/graph

    • 2.1 Graph 创建

    • 2.2 Graph 启动

  • 3. apm-collector-stream

    • 3.1 WayToNode 实现类

    • 3.2 NodeProcessor 实现类


1. 概述

本文主要分享 Collector Streaming 流式处理。主要包含如下部分:

  • apm-collector-core 模块的 graph 包,提供最精简、单节点的流式处理的封装。如下图所示:

  • apm-collector-stream 模块,在 graph 包的基础上,提供异步、跨节点等等的流式处理的封装。如下图所示:

免打脸大保健:笔者对流式处理非常不了解,本文可能是一本正经的胡说八道。考虑到笔者是靠脸吃饭(颜值我只服我红雷哥),所以读者老爷请爱护下笔者。

Collector Streaming 在 SkyWalking 架构图处于如下位置( 红框 ) :

FROM https://github.com/apache/incubating-skywalking 

OK,下面来一本正经的代码走起!

2. apm-collector-core/graph

整体类图如下:

看起来略复杂,不要方,我们先来看一个流式大数据处理框架 Apache Storm 的说明:

FROM 《流式大数据处理的三种框架:Storm,Spark和Samza》 
在 Storm 中,先要设计一个用于实时计算的图状结构,我们称之为拓扑(topology)。这个拓扑将会被提交给集群,由集群中的主控节点(master node)分发代码,将任务分配给工作节点(worker node)执行。

  • Graph :定义了一个数据在各个 Node 的处理拓扑图。

  • WayToNode :提交数据给 Node 的方式。

  • Node :节点,包含一个 NodeProcessor 和 一个 Next 。

    • NodeProcessor :Node 处理器,处理数据。

    • Next :包含 WayToNode 数组,即 Node 提交数据给 Next 的 Node 数组的方式。

整体交互流程如下:

  • 粉色箭头:当数据进来时,提交给 Grpah 。按照定义的拓扑图,使用 NodeWay 提交给 Node ,NodeProcessor 进行处理。

  • 蓝色箭头:当 NodeProcessor 处理完成后,Next 逐个使用 NodeWay 数组提交给下面的 Node ,继续处理。

    • ps :注意,这块流程,根据不同的 NodeProcessor 的实现类会有不同,蓝色箭头的过程,只是其中的一种,下面会详细解析。

整体顺序图如下:

  • DirectWay 是 WayToNode 接口的一种实现,正如其名,直接提交数据给 Node 。在 「3. apm-collector-stream」 会看到其他实现,例如提交到其他服务器节点的 Node,从而实现跨服务器节点的流式处理。

  • AbstractWorker 在 apm-collector-stream 模块,是 NodeProcessor 接口的一种实现,处理提交给 Node 的数据。在 #onWork(message) 抽象方法里,子类可以实现该方法,根据自身需求,是否调用 #onNext(message) 方法,Next 逐个使用 NodeWay 数组提交给下面的 Node ,继续处理。


下面,我们来详细分别看看如下逻辑的详细代码实现:

  • Graph 创建

  • Graph 启动

2.1 Graph 创建

创建 Graph 的顺序图如下:

  • 第一步,调用 GraphManager#createIfAbsent(graphId, input) 方法( input 参数没用 ),创建一个 Graph 对象。

  • 第二步,调用 Graph#addNode(WayToNode) 方法,创建该 Graph 的首个 Node 对象。

  • 第三步,调用 Node#addNext(WayToNode) 方法,创建该 Node 的下一个 Node 对象。

如下是 collector-agent-stream-provider 模块,TraceStreamGraph#createServiceReferenceGraph() 方法的代码:

public void createServiceReferenceGraph() {
    QueueCreatorService<ServiceReference> queueCreatorService = moduleManager.find(QueueModule.NAME).getService(QueueCreatorService.class);
    RemoteSenderService remoteSenderService = moduleManager.find(RemoteModule.NAME).getService(RemoteSenderService.class);

    Graph<ServiceReference> graph = GraphManager.INSTANCE.createIfAbsent(SERVICE_REFERENCE_GRAPH_ID, ServiceReference.class);
    graph.addNode(new ServiceReferenceAggregationWorker.Factory(moduleManager, queueCreatorService).create(workerCreateListener))
        .addNext(new ServiceReferenceRemoteWorker.Factory(moduleManager, remoteSenderService, SERVICE_REFERENCE_GRAPH_ID).create(workerCreateListener))
        .addNext(new ServiceReferencePersistenceWorker.Factory(moduleManager, queueCreatorService).create(workerCreateListener));
}

让我们来看看每个方法的具体代码实现。


第一步

GraphManager#createIfAbsent(graphId, input) 方法,创建一个 Graph 对象,并添加到 Graph 映射。代码如下:

  • INSTANCE 属性,单例。

  • allGraphs 属性,Graph 映射。其中映射的 KEY 为每个 Graph 全局唯一编号。在 JvmMetricStreamGraph 、RegisterStreamGraph 、TraceStreamGraph 类中,枚举了实际使用的 Graph 编号们。

  • 第 50 至 58 行:当 Graph 映射里不存在指定 Graph 编号时,创建 Graph 对象,并返回。


第二步

Graph#addNode(WayToNode) 方法,创建该 Graph 的首个 Node 对象。代码如下:

  • id 属性,Graph 编号。

  • entryWay,首个提交数据给 Node 的方式。

  • 第 58 行 :将方法参数 entryWay 赋值给 this.entryWay 属性。在下分享的 Graph#start(input) 方法里,我们会看到这是 Graph 启动的入口,首个提交给 Node 的方式。

  • 第 60 至 62 行 :调用 WayToNode#buildDestination(Graph) 方法,创建 Node 对象,并返回该 Node。在上文中,我们已经说过创建的 Node 对象,为该 Graph 的首个 Node 。

WayToNode#buildDestination() 方法,创建该 WayToNode 的 Node 对象。代码如下:

  • destination 属性,目标 Node 。即该 WayToNode 提交数据到的 Node 。

  • destinationHandler 属性,目标 Node 的处理器。见 `#out(INPUT)` 方法。

  • 第 42 行:创建 Node 对象。

    • 目前,`destinationHandler` 属性,除了用于创建 Node 对象,无其他用途。

Node 构造方法 方法,代码如下:

  • nodeProcessor 属性,节点处理器。

  • next 属性,包含 WayToNode 数组,即 Node 提交数据给 Next 的 Node 数组的方式。

  • 第 44 行:调用 Graph#checkForNewNode(Node) 方法,校验 Node 的 NodeProcessor 在其 Graph 里,编号唯一。

Graph#checkForNewNode(Node) 方法,校验 Node 的 NodeProcessor 在 Graph 里,编号唯一,代码如下:

  • nodeIndex 属性,处理器编号与 Node 的映射。其中映射的 KEY 为 NodeProcessor#id() 。

  • 第 72 至 78 行:校验 Node 的 NodeProcessor 在 Graph 里,编号唯一。


第三步

Node#addNext(WayToNode) 方法,创建该 Node 的下一个 Node 对象。代码如下:

  • 第 54 行:调用 WayToNode#buildDestination(Graph) 方法,创建该 Node 的下面的 Node 对象。

  • 第 56 行:添加创建的 Node 对象到 next 属性。

  • 第 58 行:返回创建的 Node 对象。

2.2 Graph 启动

创建 Graph 的顺序图如下:

数据流向FROMTO逻辑
第一步GraphWayToNode
第二步WayToNodeNode
第三步NodeNodeProcessor
第四步NodeProcessorNext根据具体实现,若到 Next ,重复第一步

第一步

Graph#start(input) 方法,启动 Graph ,处理数据。代码如下:

  • 第 49 行:调用 WayToNode#in(input) 方法,输入数据给 WayToNode 。

WayToNode#in(input) 抽象方法,以 DirectWay#in(input) 实现方法举例子,代码如下:

  • 第 30 行:调用 super#out(input) 方法,直接输出数据,调用 Node#execute(input) 方法,提交数据给 Node ,进行处理。


第二步

Node#execute 方法,调用 NodeProcessor#process(input, next) 方法,处理数据。


第三步

NodeProcessor#process(input, next) 接口方法,以 AbstractWorker#process(input, next)实现方法举例子,代码如下:

  • 第 64 行:将方法参数 next 赋值给 this.next 属性。this.next 属性,用于封装的 #onNext(OUTPUT)方法,提交数据给当前 Node 的 Next ( 下面的 Node 们 )继续处理数据。

  • 第 67 行:调用 `#onWork` 抽象方法,处理数据。当 AbstractWorker 抽象类的实现类需要继续讲数据提交给 Next 时,需要在 #onWork 方法里,调用 #onNext(OUTPUT) 方法,例如 `ApplicationRegisterRemoteWorker#onWork(Application)` 。


第四步

Next#execute(INPUT) 方法,循环 WayToNode 数组,输入数据给 WayNode ,相当于"重回"【第一步】。

3. apm-collector-stream

在文章的开头,我们提到了 apm-collector-stream 模块,在 graph 包的基础上,提供异步、跨节点等等的流式处理的封装。主要在 WayToNode 、NodeProcessor 的实现类上做文章。

3.1 WayToNode 实现类

整体类图如下:

3.1.1 WorkerRef

org.skywalking.apm.collector.stream.worker.base.WorkerRef ,Worker 引用抽象类。

在 apm-collector-stream 模块里,我们会发现类的命名从 Node / NodeProcessor 转向了 Worker ?这是为什么呢?关于这一点,我们特意采访( 请教 )了官方大佬。

Worker 更具业务含义 
Node / Processor 更偏技术含义

目前,WorkerRef 无具体的方法。

3.1.2 LocalAsyncWorkerRef

org.skywalking.apm.collector.stream.worker.base.LocalAsyncWorkerRef ,异步 Worker 引用实现类,提供了异步的流式处理封装。

我们回到 「2.2 Graph 创建」 的【第一步】。

LocalAsyncWorkerRef#in(INPUT) 方法,代码如下:

  • `queueEventHandler` 属性,队列事件处理器。在 《SkyWalking 源码分析 —— Collector Queue 队列组件》 我们会详细解析它的代码实现,这里只简单介绍下。

  • 第 47 行:将输入的数据,作为"事件",提交到队列事件处理器中,不再执行后续逻辑。此后,队列事件处理器,会在后台处理到该"事件"( 数据 ),回调 `LocalAsyncWorkerRef#execute` 方法,从而提交数据到 Worker ( Node )。详细参见 DisruptorEventHandler#onEvent(…) 方法。

那么为什么会回调呢?LocalAsyncWorkerRef 实现了 org.skywalking.apm.collector.queue.base.QueueExecutor 接口,它自身被设置到 QueueEventHandler 中, 作为"事件"的执行器。

整体流程如下:

3.1.3 RemoteWorkerRef

org.skywalking.apm.collector.stream.worker.base.RemoteWorkerRef ,远程 Worker 引用实现类,提供了远程跨节点的流式处理的封装。

我们再回到 「2.2 Graph 创建」 的【第一步】。

RemoteWorkerRef#in(INPUT) 方法,代码如下:

  • remoteSenderService 属性,远程发送服务。在 《SkyWalking 源码分析 —— Collector Remote 远程通信服务》「3.2 GRPCRemoteSenderService」 我们会详细解析它的代码实现,这里只简单介绍下。

  • remoteWorker 属性,远程 Worker 。在下文会详细分享它的实现。

  • 第 56 行:调用 RemoteSenderService#send(…) 方法,根据远程 Worker 的 Selector 选择器,选择一个 Worker 进行发送。

  • 第 58 至 60 行:当选择的 Worker 为本地模式( Mode )时,调用 #out(INPUT) 方法,提交数据到本地的 Worker ( Node )。

3.2 NodeProcessor 实现类

整体类图如下:

  • `org.skywalking.apm.collector.stream.worker.base.Provider` ,Worker 供应者接口,用于创建 Worker 和 WorkerRef 对象的工厂。

3.2.1 AbstractWorker

AbstractWorker 的代码实现,在 「2.2 Graph 启动」 已经详细解析。

org.skywalking.apm.collector.stream.worker.base.AbstractWorkerProvider ,Worker 供应者抽象类,定义了 #workerInstance(ModuleManager) 抽象方法,用于创建 Worker 对象。

3.2.2 AbstractLocalAsyncWorker

org.skywalking.apm.collector.stream.worker.base.AbstractLocalAsyncWorker ,异步 Worker 抽象类。

目前,AbstractLocalAsyncWorker 无具体的方法。

实际使用时,继承 AbstractLocalAsyncWorker 类,实现 #work(INPUT) 方法,例如:ApplicationRegisterSerialWorker 。


org.skywalking.apm.collector.stream.worker.base.AbstractLocalAsyncWorkerProvider ,LocalAsyncWorker 供应者抽象类。

  • `queueCreatorService` 属性,队列创建服务,用于创建 QueueEventHandler 对象。

  • `#queueSize()` 抽象方法,声明队列大小。

  • [#create(WorkerCreateListener)]() 实现方法,创建 AbstractLocalAsyncWorker 和 LocalAsyncWorkerRef 对象。

    • 第 51 行:创建 AbstractLocalAsyncWorker 实现类的对象。参见 ApplicationRegisterSerialWorker.Factory#workerInstance(ModuleManager) 方法。

    • 第 54 行:添加 AbstractLocalAsyncWorker 到 WorkerCreateListener ( Worker 创建监听器 )。WorkerCreateListener 在 《SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(二)》「4.1 WorkerCreateListener」 详细解析。

    • 第 57 行:创建 LocalAsyncWorkerRef 对象。

    • 第 60 行:调用 `QueueCreatorService#create(…)` 方法,创建 QueueEventHandler 对象,并设置 LocalAsyncWorkerRef 作为它的执行器。

    • 第 63 行:设置 LocalAsyncWorkerRef 的 QueueEventHandler 属性。

3.2.3 AbstractRemoteWorker

org.skywalking.apm.collector.stream.worker.base.AbstractRemoteWorker ,远程 Worker 抽象类,定义了 #selector() 抽象方法,获得选择器。RemoteSenderService 根据选择器,调用 RemoteClientSelector#select(...) 方法,选择好远程节点,而后进行发送数据。

实际使用时,继承 AbstractLocalAsyncWorker 类,实现 #work(INPUT) 方法,例如:ApplicationRegisterRemoteWorker 。


org.skywalking.apm.collector.stream.worker.base.AbstractRemoteWorkerProvider ,AbstractRemoteWorker 供应者抽象类。

  • `remoteSenderService` 属性,远程发送服务。

  • `#create(WorkerCreateListener)` 实现方法,创建 AbstractRemoteWorker 和 RemoteWorkerRef 对象。

    • 第 58 行:创建 AbstractRemoteWorker 实现类的对象。参见 ApplicationRegisterRemoteWorker.Factory#workerInstance(ModuleManager) 方法。

    • 第 61 行:添加 AbstractLocalAsyncWorker 到 WorkerCreateListener ( Worker 创建监听器 )。WorkerCreateListener 在 《SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(二)》「4.1 WorkerCreateListener」 详细解析。

    • 第 64 行:创建 RemoteWorkerRef 对象。



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

已在知识星球更新源码解析如下:


如果你喜欢这篇文章,喜欢,转发。

生活很美好,明天见(。・ω・。)ノ♡

Rust 与 Golang 深度对决:从语法到应用场景的全方位解析 Rust 定义函数以fn关键字开头,参数需明确指定类型,返回值类型紧跟在箭头->之后。// 定义函数add,接收两个i32类型参数a和b,返回i32类型结果,功能为两数相加a + bRust 和 Golang 各有千秋,在不同领域展现独特优势。Rust 凭借强大的内存安全与高性能,在系统编程、网络编程以及对内存安全和性能要求高的场景中表现突出;Golang 则以简洁语法和出色并发性能,在云计算、分布式系统、Web 开发等领域占据一席之地。 阅读详情

相关推荐

知识抽取框架OneKE

OneKE 中指令的格式采用了类 JSON 字符串的结构,本质上是一种字典类型的字符串。优化知识抽取的性能不仅能够强化模型对世界知识的理解和应用,还能够构建知识要素之间的跨领域的深度关联和依赖,这些都是大规模知识图谱构建的关键依赖。一直是知识图谱大规模落地的关键难题之一,因为真实世界的信息高度碎片化、非结构化,大语言模型在处理信息抽取任务时仍因抽取内容与自然语言表述之间的巨大差异导致效果不佳,自然语言文本信息表达中因隐式、长距离上下文关联存在较多的歧义、多义、隐喻等,给知识抽取任务带来较大的挑战。

qq_32907491的博客 3215

SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(一)

1. 概述 本文主要分享Collector Streaming 流式处理。主要包含如下部分: apm-collector-core模块的graph包,提供最精简、单节点的流式处理的封装。如下图所示: apm-collector-stream模块,在graph包的基础上,提供异步、跨节点等等的流式处理的封装。如下图所示: 免打脸大保健:笔者对流式处理非常不了解,本文可能是一本正经的胡说八道。考虑到笔者是靠脸吃饭(颜值我只服我红雷哥),所以读者老爷请爱护下笔者。...

weixin_42073629的博客 359

TASK02【datawhale组队学习】视觉感知与手眼协调,计算机视觉在机器人中应用,手眼标定算法实现,深度估计与3D重建

参考教程AI硬件与机器人技术教程:https://github.com/datawhalechina/ai-hardware-robotics视觉感知与手眼协调,计算机视觉在机器人中应用,手眼标定算法实现,深度估计与3D重建单目深度估计 (Monocular Depth Estimation)DPT 的全称是 Dense Prediction Transformer。

m0_52024881的博客 1191

SAP BW实施实时报表的方法(流式处理链)

Streaming 属性是 SAP BW 中流程链概念的一个非常酷的增强。如果您确实必须尽快将数据加载到 BW InfoProvider 中,它提供了一个灵活的工具集。首选的运行模式是 PUSH 模式和 Intelligent PULL 模式,因为它们仅在生成新的源数据时才会触发 DTP 执行。

weixin_42102153的博客 2506

独立站SaaS平台源码搭建全流程指南:从零到部署

一、什么是独立站SaaS?二、搭建前的准备工作技术选型建议模块 推荐方案 备选方案前端框架 React/Vue3 + TypeScript Angular后端框架 Spring Boot (Java)/Django (Python) Node.js (NestJS)数据库 MySQL + Redis PostgreSQL/MongoDB云服务 阿里云/腾讯云/AWS 华为云容器化 Docker + Kubernetes Docker Compose环境要求。

Vx18664956126的博客 1893

SAP FICO 消息号 FAA_POST042 技术清算科目中的余额:分类账 0L,货币 00、RMB、10000.00-

SAP FICO 消息号 FAA_POST042 技术清算科目中的余额:分类账 0L,货币 00、RMB、10000.00-

我好像病了的博客 2142

BW维护操作:处理链的一切

文章目录1. 监控1.1 处理链1.1.1 处理链里都有啥1.1.2 处理链进程类型1.1.3 流处理链1.1.4 处理链构建1.1.4.1 计划和检查1.1.4.2 创建1.1.4.3 BI Monitor1.1.4.4 重复1.1.4.7 授权1.2 监控1.2.1 BW Job1.2.2 进程监控1.3 缓存监控 cache monitoring2. Query 运行时数据2.1 分析统计数据2.2 配置数据属性2.3 从RSDDSTATEVENTS看数据event 1. 监控 1.1 处理链 你要知

weixin_45689053的博客 5733

汇川伺服Modbus-RTU通讯实战:从帧结构解析到西门子PLC配置

本文详细解析了汇川伺服与西门子PLC通过Modbus-RTU协议进行通讯的实战步骤,包括帧结构解析、硬件连接、参数设置及PLC程序配置。通过具体案例和常见问题排查指南,帮助工程师快速掌握工业自动化中的通讯技术,提升设备调试效率。

weixin_33670713的博客 456

链路追踪 SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(二)

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 Ro...

芋艿V 238

单目视觉定位:深入解析PNP算法在机器人导航中的实战应用

本文深入解析了PNP算法在机器人单目视觉定位中的核心原理与实战应用。通过拆解坐标变换四步,详细阐述了如何从二维图像点反求相机三维位姿。文章结合OpenCV的solvePnP函数,提供了算法选择、参数调优及结果后处理的实用指南,并针对机器人导航中的特征匹配、尺度不确定性等挑战,给出了鲁棒性优化与实时性平衡的解决方案。

weixin_29083649的博客 419

小工匠聊架构-分布式场景下的并发幂等性常见的解决方案

Pre 我们来回顾下单体时代 单体时代,应用部署在一台主机上,可以使用JVM级别的锁来控制并发请求 。 随着应用规模的不断扩大,集群化或者微服务化的分布式部署越来越普及,每个应用都是一个单独的JVM应用,所以单体时代的这种处理方式已经无法满足当前架构下的业务需求了。 JVM级别的锁已经无法满足跨进程之间访问控制了,进而演化出来了分布式锁。 分布式锁 能否解决幂等性问题? 分布式锁解决什么问题? 简言之: 解决跨进程间无法共享本地资源的问题 ,解决的是分布式场景下并发访问的问题。 为什么需要确保并发.

小工匠 2万+

skywalking使用方法_链路追踪 SkyWalking 源码分析 —— Collector Queue 队列组件

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/collector-queue-module/ 「芋道源码」欢迎转载,保留摘要,谢谢!本文主要基于 SkyWalking 3.2.6 正式版1. 概述2. collector-queue-define3. collector-queue-disruptor-provider4. collector-queue-da...

weixin_39543773的博客 221

DeepSeek+Cline:开启自动化编程新纪元

随着 AI 技术不断进步,编程领域迎来效率变革。DeepSeek 与 Cline 的结合,成为自动化编程的强大工具。DeepSeek 凭借先进的自然语言处理能力,能精准理解编程需求;Cline 作为 VSCode 插件,可实现代码生成、调试、注释等功能的无缝衔接。本文详细阐述二者安装配置、实战操作流程,涵盖从基础代码生成到复杂项目开发的应用技巧,同时解答常见问题,帮助开发者快速掌握这对 “智能搭档”,提升编程效率,解锁自动化编程的无限可能。

邓邓子的博客 6258

Skywalking入门以及源码分析

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar

sun12141214的博客 892

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

skywalking从入门到精通(附源码)-前言

skywalking 是一款近几年非常流行性能监控工具,但是作者翻阅中文互联网并没有一个通俗易懂的,能让一个小白按照步骤完整入门,复现所有效果的教程,故写了 skywalking从入门到精通 的系列教程,并提供源码供学习者更好的学习skywalking。

ratel的博客 1088

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

Skywalking告警模块-源码解读

1:告警规则定义 告警的核心是由’ alarm-setting.yml’文件中配置的一组规则驱动的。告警规则(Rules)的定义分为两部分 1.1:rules 定义了触发告警的度量和条件,该部分映射为AlarmRule类。 [Rule name]:规则名称,唯一标识,需以“_rule”结尾 Metrics-name:指标名称,oal脚本中度量名称,必须在oal脚本中定义过 include-names:适用该规则的实体名称,可配置系统名称、服务名称。不配置默认所有实体均适用 Thresho...

qq_44838446的博客 1728

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(二)

1. 概述 本文接《SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(一)》,主要分享Collector Streaming 流式处理的第二部分。主要包含如下部分: AggregationWorker :聚合处理数据,后提交 Data 到 Next 节点们处理。 PersistenceWorker :聚合处理数据,后存储 Data 。 2. Data AggregationWorker 和 PersistenceWorker ,都先...

weixin_42073629的博客 335

skywalking源码分析第七篇一StorageModule存储模块启动

文章目录数据模型存储层架构设计注册数据锁原理图源码分析一StorageModuleElasticsearchProvider索引创建@stream注解处理源码分析 存储实现本文默认elasticsearch 数据模型 StorageData代表一条数据 每一条数据都会被存储到elasticsearch 数据类上如果标注@Stream注解,则会被构建成Model对象[第五篇annotationScan已经介绍] StorageModuleProvider启动时会基于Model向es创建索引 存储层架

小麒麟的博客 2383

分布式追踪 & APM 系统 SkyWalking 源码分析 —— Collector Streaming Computing 流式处理(二)

摘要: 原创出处 http://www.iocoder.cn/SkyWalking/collector-streaming-second/ 「芋道源码」欢迎转载,保留摘要,谢谢! 本文主要基于 SkyWalking 3.2.6 正式版 1. 概述 2. Data 2.1 Collection 2.2 DataCollection 2.3 Window 2.4 DataCache 3. Ag...

芋艿V 1413

SkyWalking 源码分析 —— 运维界面(一)之应用视角

1. 概述 本文主要分享运维界面的第一部分,应用视角。 SkyWalking WEBUI :https://github.com/apache/incubator-skywalking-ui 在我们打开 SkyWalking WEBUI 的首页时,如下图: 以应用为维度进行展示。 紫色部分,时间进度条,调用「2. AllInstanceLastTimeGetHandler」接口,获得应用实例最后心跳时间。大多情况下,我们进入该界面,看的是从最后心跳时间开始的应用调用情况。 红色部分,..

weixin_42073629的博客 656

Skywalking-09:OAL原理——如何通过动态生成的Class类保存数据

OAL 如何通过动态生成的 Class 类,保存数据 前置工作 OAL 如何将动态生成的 SourceDispatcher 添加到 DispatcherManager // org.apache.skywalking.oap.server.core.oal.rt.OALEngineLoaderService#load public void load(OALDefine define) throws ModuleStartException { if (oalD

Switch的博客 938

使用Skywalking实现全链路监控

https://opentalk.upyun.com/334.html 2017 年 10 月 29 日,又拍云 Open Talk 联合 Spring Cloud 中国社区成功举办了“进击的微服务实战派北京站”。华为技术专家吴晟作了题为《使用 Skywalking 实现全链路监控》的分享,以下是分享实录: 一、分布式追踪 (一)三种场景 1、Metrics 指标性统计 比如说我们会...

weixin_33704591的博客 5883

Skywalking原理学习 -- skywalking 搭建及入门示例

访问地址:http://localhost:8080/1、首页:2、调用关系3、服务调用信息4、追踪日志信息。

井底之蛙 9万+

链路追踪 SkyWalking 源码分析 —— Agent 初始化

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏 中文详细注释的开源项目消息中间件 RocketMQ 源码解析数据库中间件 Sharding...

芋道源码 916

链路追踪 SkyWalking 源码分析 —— Collector Storage 存储组件

点击上方“芋道源码”,选择“设为星标”做积极的人,而不是积极废人!源码精品专栏中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析...

芋道源码 1036
上一篇: 除了不要 SELECT * ,数据库还有哪些技巧
下一篇: 一次心惊肉跳的服务器误删文件的恢复过程
公众号-芋道源码
博客等级 码龄10年 1638粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值