Kubernetes生产实践系列之十三：在Kubernetes部署Jaeger并进行trace管理

关注

原创最新推荐文章于 2026-11-09 14:00:24 发布 2.5k 阅读 AI 写同款· GEO 优化 ›

三种trace的结构及包提取（根据师兄论文整理） 1.CERNET trace的文件结构 Trace文件中有多个Packet data，其中每一个Packet data的格式 CERNET的trace文件中每一个报文的长度都固定为52字节，1——4这4个字节为每一个报文的采集时间精确到秒。5——8这4个字节为每一个报文的采集时间精确到毫秒。9——28这20个字节为报文的固定头部，就是IP头部的固定20个字节，采自网络中报文的头部1——20字节... 阅读详情

一、前言

在云原生的生产环境中，大量微服务和中间件的部署以及微服务之间复杂的调用关系会将业务系统排查的难度提高一个数量级，而一个优秀的APM系统是复杂的分布式业务系统进行问题排查最强大的帮手之一，一个好的APM系统可以更直观的反应系统内部的业务流，帮你快速将问题锁定在几个相关的上下游模块。

Uber开源的分布式系统调用链跟踪方案Jaeger能够在云原生快速部署的情况下，支持大规模、分布式、近实时的APM。根据Jaeger网站的描述，Uber现在每天使用Jaeger处理好几十亿的span。

转载自https://blog.youkuaiyun.com/cloudvtech

二、Jaeger系统方案

2.1 Jaegr的功能特点

根据Jaeger的官网描述，Jager具有以下的功能：

分布式上下文传递
分布式业务监控
RCA
服务依赖分析
性能调优

它的优秀的能力包括：

可扩展
对OpenTracing的原生支持
多后端存储的支持(Cassandra/ES/InfluxDB/DynamoDB etc.)
优秀的UI
云原生的部署
可观测性(和Prometheus的高度集成)
兼容Zipkin

同时，由于Jaeger是一款入侵性的APM，所以Jaeger还提供了多种客户端lib的支持。

2.2 Jaeger的架构方案

由于APM系统面对的通常是业务系统3～5倍甚至更多的TPS，所以APM面临的接入、存储、聚合和查询的压力是非常大的，一个好的APM系统必定是一个分布式可扩展的高性能系统。

根据不同的业务情况，需要选择不同的Jaeger架构进行部署实时。对于一些低TPS的CRM、BI、OA等业务系统，可以使用如下的架构快速部署：

在这一架构中，Jaeger Clooector会直接将client/agent上报的Span存储到es或者ca这样的存储中，这一的架构可以快速进行改造和实施，缺点是无法低于高TPS系统的请求。而针对高TPS的业务流，需要使用kafka进行压力缓冲，具体架构如下：

在这一架构中，kafka将业务接入和业务存储进行分离，可以提供业务压力缓存并增加系统可用性；而es可以提供强大的存储、聚合和查询功能，为最终的分析提供强大的后端支持；同时可以在es开启时间清理特性，保证trace数据的总存储量可控。

与此同时，Jaeger还提供了灵活的采样配置项以控制trace数据的tps：

const，全量采集，采样率设置0/1 分别对应打开和关闭
probabilistic ，概率采集，0~1之间取值，
rateLimiting ，限速采集，每秒只能采集一定量的数据
remote ，一种动态采集策略，根据当前系统的访问量调节采集策略

同时Jaeger还提供了一些tuning tip来提高Jaeger系统的性能：

https://www.jaegertracing.io/docs/1.17/performance-tuning/

转载自https://blog.youkuaiyun.com/cloudvtech

三、快速部署Jaeger系统

3.1 获取代码

git clone https://github.com/jaegertracing/jaeger-kubernetes.git

3.2 部署

kubectl create ns jaeger

修改production/cassandra.yml选择使用合适的存储：

修改文件jaeger-production-template.yml：

最后为Jaeger UI增加Ingress

apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: jaeger-ui
  namespace: jaeger
spec:
  rules:
  - host: jaeger.test.com
    http:
      paths:
      - path: /
        backend:
          serviceName: jaeger-query
          servicePort: 80

最新的版本还可以通过Operator的方式进行部署(https://www.jaegertracing.io/docs/1.17/operator/)，支持如下几种业务方式：