全链路跟踪ZipKin学习实践

本文介绍了如何安装和配置ZipKin,包括ZipKin服务器、Elasticsearch以及Elasticsearch Head。通过实例展示了SpringBoot应用中如何创建调用链,并解释了在ZipKin UI上查看调用链的效果。此外,还提供了详细的操作步骤和参考资料链接。

zipkin安装

下载zipkin:curl -sSL https://zipkin.io/quickstart.sh | bash -s
或者 wget -O zipkin.jar ‘https://search.maven.org/remote_content?g=io.zipkin.java&a=zipkin-server&v=LATEST&c=exec

启动: java -jar zipkin.jar 默认使用内存存储模式
或者 java -jar zipkin.jar --STORAGE_TYPE=elasticsearch --DES_HOSTS=http://localhost:9200 指定elasticsearch做为数据存储

elasticsearch安装

参考 https://www.jianshu.com/p/85576c56700e

下载安装的压缩包
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.5.3.tar.gz
解压安装包
tar -xvf elasticsearch-6.5.3.tar.gz

修改conf下面的elasticsearch.yml

cluster.name: elasticsearch
node.name: master
path.data: /usr/local/elasticsearch-6.5.3/data
path.logs: /usr/local/elasticsearch-6.5.3/logs
network.host: 0.0.0.0
http.port: 9200

不能以root用户启动
创建elsearch用户组及elsearch用户

groupadd elsearch
useradd elsearch -g elsearch -p elasticsearch

启动
[elsearch@localhost bin]$ ./elasticsearch

在这里插入图片描述
以上错误 参考 http://www.cnblogs.com/sloveling/p/elasticsearch.html

elasticsearch head安装

1.参考 https://www.cnblogs.com/liuqi/p/6483317.html 安装nodejs
2.
下载elasticsearch head代码
[root@localhost ~]# git clone https://github.com/mobz/elasticsearch-head.git
cd elasticsearch-head
执行 npm install

如果报错:npm ERR! Failed at the phantomjs-prebuilt@2.1.16 install script.
执行

[root@localhost elasticsearch-head]# npm install phantomjs-prebuilt@2.1.16 --ignore-scripts
npm notice created a lockfile as package-lock.json. You should commit this file.
npm WARN elasticsearch-head@0.0.0 license should be a valid SPDX license expression
npm WARN optional SKIPPING OPTIONAL DEPENDENCY: fsevents@1.2.4 (node_modules/fsevents):
npm WARN notsup SKIPPING OPTIONAL DEPENDENCY: Unsupported platform for fsevents@1.2.4: wanted {"os":"darwin","arch":"any"} (current: {"os":"linux","arch":"x64"})

+ phantomjs-prebuilt@2.1.16
added 62 packages from 64 contributors, removed 4 packages and audited 1717 packages in 15.187s
found 23 vulnerabilities (16 low, 1 moderate, 6 high)
  run `npm audit fix` to fix them, or `npm audit` for details

启动

[root@localhost elasticsearch-head]# npm run start
> elasticsearch-head@0.0.0 start /home/zipkin/elasticsearch-head
> grunt server

>> Local Npm module "grunt-contrib-jasmine" not found. Is it installed?

Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100

测试调用程序

提供四个工程,分别对应四个服务分别是:springtest1,springtest2,springtest3,springtest4;springtest1通过httpclient调用springtest2,然后springtest2通过httpclient调用springtest3和springtest4,形成一个调用链;四个服务都是基于spring-boot来实现,对应的端口分别是8081,8082,8083,8084

具体代码见:https://github.com/wlmvp/zipkindemo

运行结果

发送一次调用请求

在这里插入图片描述

在zipkin ui上的展示效果

在这里插入图片描述

###对应下载的json为:

[
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "de431abda88bed0d",
    "id": "f8e6f28160c75955",
    "kind": "SERVER",
    "name": "get",
    "timestamp": 1545026293807000,
    "duration": 541000,
    "localEndpoint": {
      "serviceName": "service4",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.status_code": "200",
      "http.url": "/service4"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "de431abda88bed0d",
    "id": "c15f33be729f2485",
    "kind": "SERVER",
    "name": "get",
    "timestamp": 1545026293127000,
    "duration": 180000,
    "localEndpoint": {
      "serviceName": "service3",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.status_code": "200",
      "http.url": "/service3"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "20d54eaab80af0e8",
    "id": "de431abda88bed0d",
    "kind": "CLIENT",
    "name": "get",
    "timestamp": 1545026292154000,
    "duration": 2471000,
    "localEndpoint": {
      "serviceName": "service1",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.url": "/service2"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "20d54eaab80af0e8",
    "id": "de431abda88bed0d",
    "kind": "SERVER",
    "name": "get",
    "timestamp": 1545026292502000,
    "duration": 2118000,
    "localEndpoint": {
      "serviceName": "service2",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.status_code": "200",
      "http.url": "/service2"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "de431abda88bed0d",
    "id": "c15f33be729f2485",
    "kind": "CLIENT",
    "name": "get",
    "timestamp": 1545026292818000,
    "duration": 516000,
    "localEndpoint": {
      "serviceName": "service2",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.url": "/service3"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "parentId": "de431abda88bed0d",
    "id": "f8e6f28160c75955",
    "kind": "CLIENT",
    "name": "get",
    "timestamp": 1545026293339000,
    "duration": 974000,
    "localEndpoint": {
      "serviceName": "service2",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.url": "/service4"
    }
  },
  {
    "traceId": "20d54eaab80af0e8",
    "id": "20d54eaab80af0e8",
    "kind": "SERVER",
    "name": "get",
    "timestamp": 1545026291653000,
    "duration": 3348000,
    "localEndpoint": {
      "serviceName": "service1",
      "ipv4": "172.17.0.1"
    },
    "tags": {
      "http.status_code": "200",
      "http.url": "/service1"
    }
  }
]

###elasticsearch:

curl http://192.168.119.158:9200/
{
  "name" : "master",
  "cluster_name" : "elasticsearch",
  "cluster_uuid" : "m078sK79TpaDnOI17Iz21Q",
  "version" : {
    "number" : "6.5.3",
    "build_flavor" : "default",
    "build_type" : "tar",
    "build_hash" : "159a78a",
    "build_date" : "2018-12-06T20:11:28.826501Z",
    "build_snapshot" : false,
    "lucene_version" : "7.5.0",
    "minimum_wire_compatibility_version" : "5.6.0",
    "minimum_index_compatibility_version" : "5.0.0"
  },
  "tagline" : "You Know, for Search"
}

###elasticsearch head的显示:
在这里插入图片描述

通过抓包可以看到这调用的报文里增加了tranceid等:

[root@localhost ~]# ./goreplay -input-raw :8081 -input-raw :8082 -input-raw :8083 -input-raw :8084 -output-file 8000.gor
Version: 0.16.1
^C[root@localhost ~]# 
[root@localhost ~]# 
[root@localhost ~]# 
[root@localhost ~]# cat 8000_0.gor 
1 98ff93f20b5f5f8ee0c5f33e476eb6b3daef5bfb 1546616755662145000
GET /service1 HTTP/1.1
Host: 192.168.119.158:8081
Connection: keep-alive
Upgrade-Insecure-Requests: 1
User-Agent: Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.77 Safari/537.36
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8
Accept-Encoding: gzip, deflate
Accept-Language: zh-CN,zh;q=0.9


???
1 8a08f021c8b83b18b541a708b158078cfc8d5703 1546616755928309000
GET /service2 HTTP/1.1
X-B3-Sampled: 1
X-B3-TraceId: e865783e3d562e61
X-B3-SpanId: cb4887c469aa5653
X-B3-ParentSpanId: e865783e3d562e61
Host: localhost:8082
Connection: Keep-Alive
User-Agent: Apache-HttpClient/4.5.5 (Java/1.8.0_191)
Accept-Encoding: gzip,deflate


???
1 bee71d98c6dd46e9f2487772ce71fb3bd3985fcd 1546616757197535000
GET /service4 HTTP/1.1
X-B3-Sampled: 1
X-B3-TraceId: e865783e3d562e61
X-B3-SpanId: 779a117dced10f19
X-B3-ParentSpanId: cb4887c469aa5653
Host: localhost:8084
Connection: Keep-Alive
User-Agent: Apache-HttpClient/4.5.5 (Java/1.8.0_191)
Accept-Encoding: gzip,deflate


???
1 d36d6e6116ad5c3fbc1c9dadb535cbf413d33844 1546616756722889000
GET /service3 HTTP/1.1
X-B3-Sampled: 1
X-B3-TraceId: e865783e3d562e61
X-B3-SpanId: 470151a82bcd9cf
X-B3-ParentSpanId: cb4887c469aa5653
Host: localhost:8083
Connection: Keep-Alive
User-Agent: Apache-HttpClient/4.5.5 (Java/1.8.0_191)
Accept-Encoding: gzip,deflate


???
[root@localhost ~]# 
微服务是什么?微服务是用于构建应用程序的架构风格,一个大的系统可由一个或者多个微服务组成,微服务架构可将应用拆分成多个核心功能,每个功能都被称为一项服务,可以单独构建和部署,这意味着各项服务在工作和出现故障的时候不会相互影响。为什么要用微服务?单体架构下的所有代码模块都耦合在一起,代码量大,维护困难,想要更新一个模块的代码,也可能会影响其他模块,不能很好的定制化代码。微服务中可以有java编写、有Python编写的,他们都是靠restful架构风格统一成一个系统的,所以微服务本身与具体技术无关、扩展性强。大型电商平台微服务功能图为什么要将SpringCloud项目部署到k8s平台?SpringCloud只能用在SpringBoot的java环境中,而kubernetes可以适用于任何开发语言,只要能被放进docker的应用,都可以在kubernetes上运行,而且更轻量,更简单。SpringCloud很多功能都跟kubernetes重合,比如服务发现,负载均衡,配置管理,所以如果把SpringCloud部署到k8s,那么很多功能可以直接使用k8s原生的,减少复杂度。Kubernetes作为成熟的容器编排工具,在国内外很多公司、世界500强等企业已经落地使用,很多中小型公司也开始把业务迁移到kubernetes中。kubernetes已经成为互联网行业急需的人才,很多企业都开始引进kubernetes技术人员,实现其内部的自动化容器云平台的建设。对于开发、测试、运维、架构师等技术人员来说k8s已经成为的一项重要的技能,下面列举了国内外在生产环境使用kubernetes的公司: 国内在用k8s的公司:阿里巴巴、百度、腾讯、京东、360、新浪、头条、知乎、华为、小米、富士康、移动、银行、电网、阿里云、青云、时速云、腾讯、优酷、抖音、快手、美团等国外在用k8s的公司:谷歌、IBM、丰田、iphone、微软、redhat等整个K8S体系涉及到的技术众多,包括存储、网络、安全、监控、日志、DevOps、微服务等,很多刚接触K8S的初学者,都会感到无从下手,为了能让大家系统地学习,克服这些技术难点,推出了这套K8S架构师课程。Kubernetes的发展前景 kubernetes作为炙手可热的技术,已经成为云计算领域获取高薪要掌握的重要技能,在招聘网站搜索k8s,薪资水平也非常可观,为了让大家能够了解k8s目前的薪资分布情况,下面列举一些K8S的招聘截图: 讲师介绍:  先超容器云架构师、IT技术架构师、DevOps工程师,曾就职于世界500强上市公司,拥有多年一线运维经验,主导过上亿流量的pv项目的架构设计和运维工作;具有丰富的在线教育经验,对课程一直在改进和提高、不断的更新和完善、开发更多的企业实战项目。所教学员遍布京东、阿里、百度、电网等大型企业和上市公司。课程学习计划 学习方式:视频录播+视频回放+全套源码笔记 教学服务:模拟面试、就业指导、岗位内推、一对一答疑、远程指导 VIP终身服务:一次购买,终身学习课程亮点:1. 学习方式灵活,不占用工作时间:可在电脑、手机观看,随时可以学习,不占用上班时间2.老师答疑及时:老师24小时在线答疑3. 知识点覆盖全、课程质量高4. 精益求精、不断改进根据学员要求、随时更新课程内容5. 适合范围广,不管你是0基础,还是拥有工作经验均可学习:0基础1-3年工作经验3-5年工作经验5年以上工作经验运维、开发、测试、产品、前端、架构师其他行业转行做技术人员均可学习课程部分项目截图   课程大纲 k8s+SpringCloud全栈技术:基于世界500强的企业实战课程-大纲第一章 开班仪式老师自我介绍、课程大纲介绍、行业背景、发展趋势、市场行情、课程优势、薪资水平、给大家的职业规划、课程学习计划、岗位内推第二章 kubernetes介绍Kubernetes简介kubernetes起源和发展kubernetes优点kubernetes功能kubernetes应用领域:在大数据、5G、区块链、DevOps、AI等领域的应用第三章  kubernetes中的资源对象最小调度单元Pod标签Label和标签选择器控制器Replicaset、Deployment、Statefulset、Daemonset等四层负载均衡器Service第四章 kubernetes架构和组件熟悉谷歌的Borg架构kubernetes单master节点架构kubernetes多master节点高可用架构kubernetes多层架构设计原理kubernetes API介绍master(控制)节点组件:apiserver、scheduler、controller-manager、etcdnode(工作)节点组件:kube-proxy、coredns、calico附加组件:prometheus、dashboard、metrics-server、efk、HPA、VPA、Descheduler、Flannel、cAdvisor、Ingress     Controller。第五章 部署多master节点的K8S高可用集群(kubeadm)第六章 带你体验kubernetes可视化界面dashboard在kubernetes中部署dashboard通过token令牌登陆dashboard通过kubeconfig登陆dashboard限制dashboard的用户权限在dashboard界面部署Web服务在dashboard界面部署redis服务第七章 资源清单YAML文件编写技巧编写YAML文件常用字段,YAML文件编写技巧,kubectl explain查看帮助命令,手把手教你创建一个Pod的YAML文件第八章 通过资源清单YAML文件部署tomcat站点编写tomcat的资源清单YAML文件、创建service发布应用、通过HTTP、HTTPS访问tomcat第九章  kubernetes Ingress发布服务Ingress和Ingress Controller概述Ingress和Servcie关系安装Nginx Ingress Controller安装Traefik Ingress Controller使用Ingress发布k8s服务Ingress代理HTTP/HTTPS服务Ingress实现应用的灰度发布-可按百分比、按流量分发第十章 私有镜像仓库Harbor安装和配置Harbor简介安装HarborHarbor UI界面使用上传镜像到Harbor仓库从Harbor仓库下载镜像第十一章 微服务概述什么是微服务?为什么要用微服务?微服务的特性什么样的项目适合微服务?使用微服务需要考虑的问题常见的微服务框架常见的微服务框架对比分析第十二章 SpringCloud概述SpringCloud是什么?SpringCloud和SpringBoot什么关系?SpringCloud微服务框架的优缺点SpringCloud项目部署到k8s的流程第十三章 SpringCloud组件介绍服务注册与发现组件Eureka客户端负载均衡组件Ribbon服务网关Zuul熔断器HystrixAPI网关SpringCloud Gateway配置中心SpringCloud Config第十四章 将SpringCloud项目部署到k8s平台的注意事项如何进行服务发现?如何进行配置管理?如何进行负载均衡?如何对外发布服务?k8s部署SpringCloud项目的整体流程第十五章 部署MySQL数据库MySQL简介MySQL特点安装部署MySQL在MySQL数据库导入数据对MySQL数据库授权第十六章 将SpringCLoud项目部署到k8s平台SpringCloud的微服务电商框架安装openjdk和maven修改源代码、更改数据库连接地址通过Maven编译、构建、打包源代码在k8s中部署Eureka组件在k8s中部署Gateway组件在k8s中部署前端服务在k8s中部署订单服务在k8s中部署产品服务在k8s中部署库存服务第十七章 微服务的扩容和缩容第十八章 微服务的全链路监控什么是全链路监控?为什么要进行全链路监控?全链路监控能解决哪些问题?常见的全链路监控工具:zipkin、skywalking、pinpoint全链路监控工具对比分析第十九章 部署pinpoint服务部署pinpoint部署pinpoint agent在k8s中重新部署带pinpoint agent的产品服务在k8s中重新部署带pinpoint agent的订单服务在k8s中重新部署带pinpoint agent的库存服务在k8s中重新部署带pinpoint agent的前端服务在k8s中重新部署带pinpoint agent的网关和eureka服务Pinpoint UI界面使用第二十章 基于Jenkins+k8s+harbor等构建企业级DevOps平台第二十一章 基于Promethues+Alert+Grafana搭建企业级监控系统第二十二章 部署智能化日志收集系统EFK 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值