Istio 可观测性工具与架构深入解析
1. 可观测性工具概述
Istio 能够生成各种指标,这些指标可被输入到不同的遥测应用中。开箱即用的 Istio 安装包附带了多个附加组件,包括 Kiali、Jaeger、Prometheus 和 Grafana。
1.1 Kiali
Kiali 是 Istio 的默认管理 UI。安装和使用步骤如下:
1. 启用遥测工具:
$ kubectl apply -f samples/addons
- 检查 Kiali 部署状态:
$ kubectl rollout status deployment/kiali -n istio-system
- 打开 Kiali 仪表盘:
$ istioctl dashboard kiali
Kiali 对于可视化和故障排除网格拓扑以及底层网格流量非常有用。其概述页面提供集群中所有命名空间的概览,还可以点击右上角的三个点深入查看命名空间并更改配置。此外,还能查看单个应用程序、Pod、服务等,其中图(Graph)可视化功能可展示指定时间段内网格中的流量流向。
1.2 Jaeger
Jaeger 是一个开源的端到端分布式事务监控软件。打开 Jaeger 仪表盘的命令为:
$ istioctl dashboard jaeger
在 Jaeger 仪表盘的搜索(Search)部分,选择感兴趣的服务,点击“Find Traces”,即可查看涉及 bookinfons 命名空间中 Details 应用的所有跟踪信息。点击任何条目可查看更多详细信息。
1.3 Prometheus
Prometheus 是一个开源的监控系统和时间序列数据库,用于捕获随时间变化的所有指标,以跟踪网格及其组件的健康状况。启动 Prometheus 仪表盘的命令为:
$ istioctl dashboard prometheus
安装后,Prometheus 配置为从 istiod、Ingress 和 Egress 网关以及 istio-proxy 收集指标。
1.4 Grafana
Grafana 是另一个可视化工具。启动 Grafana 仪表盘的命令为:
$ istioctl dashboard grafana
它可以可视化 Istio 处理的总请求,如 productpage 应用的相关请求。
2. Istio 架构
Istio 服务网格由数据平面和控制平面组成。
2.1 控制平面
控制平面由 istiod 组件以及一些其他 Kubernetes 配置组成,负责管理和为数据平面提供服务发现,传播与安全和流量管理相关的配置,以及为数据平面组件提供和管理身份与证书。
istiod 是控制平面的关键组件,它统一了先前版本中 Galley、Pilot、Citadel 等组件的功能,提供简化的安装、操作和监控,以及不同 Istio 版本之间的无缝升级。istiod 的主要功能包括:
-
配置监控
:监控 Istio 自定义资源定义(CRDs)和其他 Istio 相关配置,将配置处理并分发给内部子组件。
-
API 验证
:添加准入控制器,在 Istio 资源被 Kubernetes API 服务器接受之前进行验证。
-
Istio 证书颁发机构
:负责签署来自与 istio-proxy 一起部署的节点代理的请求,执行证书和密钥的轮换与撤销。
此外,控制平面还包括以下功能和组件:
- 边车注入:通过变异准入 Webhook 管理边车注入。
- Istio 节点代理:与 Envoy 一起部署,负责与 Istio CA 通信,为 Envoy 提供证书和密钥。
- 身份目录和注册表:管理各种工作负载的身份目录,用于 Istio CA 为请求的身份颁发密钥/证书。
- 终端用户上下文传播:提供安全机制,在 Ingress 上执行终端用户身份验证,并将用户上下文传播到服务网格内的其他服务和应用程序。
2.2 数据平面
数据平面由部署在 Pod 中应用程序容器旁边的 Istio 代理组成,这些代理本质上是 Envoy。Envoy 是一个应用程序感知的服务代理,根据控制平面的指令调解微服务之间的所有网络流量,还会收集各种指标并将遥测数据报告给各种附加工具。
2.3 控制平面组件部署模型
在企业环境中部署 Istio 时,控制平面的部署模型会根据不同的网络和基础设施配置而有所不同。主要的部署模型有:
-
单集群本地控制平面
:集群中所有命名空间的边车代理都连接到部署在同一集群中的控制平面,控制平面与同一集群中的 Kubernetes API 服务器和边车进行通信。
graph LR
classDef process fill:#E5F6FF,stroke:#73A6FF,stroke-width:2px;
A(Kubernetes 集群):::process --> B(Istio 控制平面):::process
A --> C(Istio 数据平面):::process
B --> C
- 单控制平面的主集群和远程集群 :存在一个主集群和一个远程集群,它们共享一个公共控制平面。需要额外的配置来提供主集群中的控制平面与远程集群中的数据平面之间的互连性,例如添加 Ingress 网关来保护和路由与主控制平面的通信。
graph LR
classDef process fill:#E5F6FF,stroke:#73A6FF,stroke-width:2px;
A(主集群):::process --> B(Istio 控制平面):::process
C(远程集群):::process --> D(Istio 数据平面):::process
B --> D
E(Ingress 网关):::process --> B
C --> E
- 单集群外部控制平面 :将控制平面和数据平面分别部署在不同的 Kubernetes 集群中,这种部署方式有助于满足安全、关注点分离和合规性要求。
graph LR
classDef process fill:#E5F6FF,stroke:#73A6FF,stroke-width:2px;
A(Kubernetes 集群 1):::process --> B(Istio 控制平面):::process
C(Kubernetes 集群 2):::process --> D(Istio 数据平面):::process
B --> D
3. Envoy - Istio 数据平面的核心
3.1 Envoy 简介
Envoy 是一个轻量级、高性能的第 7 层和第 4 层代理,具有易于使用的配置系统,适用于作为 API 网关架构模式中的独立边缘代理,以及服务网格架构模式中的边车代理。Envoy 的独特特点使其与其他代理不同:
-
线程模型
:大多数线程异步运行,多个连接共享同一个工作线程,以非阻塞方式处理请求,实现高吞吐量。主要有三种类型的线程:
- 主线程:负责 Envoy 的启动和关闭、xDS 处理、API 处理、运行时和一般进程管理。
- 工作线程:通常每个 CPU 核心或硬件线程运行一个工作线程,负责监听网络位置,执行监听、过滤和转发操作。
- 文件刷新线程:以非阻塞方式处理文件写入。
-
架构
:具有可插拔的过滤器链,可编写过滤器执行不同的 TCP/UDP 任务。支持 HTTP 1.1 和 HTTP 2,可作为透明代理在两种协议下操作,还支持现代协议如 gRPC。
-
配置
:可以使用静态配置文件进行配置,也支持动态配置,通过 xDS API 从网络获取最新配置,无需重启。
3.2 Envoy 过滤器
3.2.1 HTTP 过滤器
为支持 HTTP,Envoy 提供了各种 HTTP 级过滤器。配置 Envoy 时,主要涉及以下配置:
- Envoy 监听器:下游系统连接的端口、套接字等网络位置。
- Envoy 路由:描述流量如何路由到上游系统的配置。
- Envoy 集群:由一组相似的上游系统组成的逻辑服务。
- Envoy 端点:提供请求服务的单个上游系统。
以下是一个简单的 Envoy 配置示例:
static_resources:
listeners:
- name: listener_http
address:
socket_address:
address: 0.0.0.0
port_value: 10000
filter_chains:
- filters:
- name: envoy.filters.network.http_connection_manager
typed_config:
"@type": type.googleapis.com/envoy.extensions.filters.network.http_connection_manager.v3.HttpConnectionManager
stat_prefix: chapter3-1_service
http_filters:
- name: envoy.filters.http.router
typed_config:
"@type": type.googleapis.com/envoy.extensions.filters.http.router.v3.Router
route_config:
name: my_first_route_to_nowhere
virtual_hosts:
- name: dummy
domains: ["*"]
routes:
- match:
prefix: "/"
direct_response:
status: 200
body:
inline_string: "Bootstrap Service Mesh Implementations with Istio"
3.2.2 监听器过滤器
监听器过滤器可对新接受的套接字进行操作,决定是否继续执行后续过滤器。例如,使用
envoy.filters.listener.http_inspector
过滤器可以检测底层应用协议是 HTTP/1.1 还是 HTTP/2。
3.3 Envoy 的动态配置
通过 xDS API,Envoy 可以实现动态配置。xDS API 是一组与各种 Envoy 配置相关的服务发现 API,包括:
- 秘密发现服务(SDS):提供证书和私钥等秘密信息。
- 端点发现服务(EDS):提供集群成员的详细信息。
- 集群发现服务(CDS):提供集群相关信息,包括端点引用。
- 范围路由发现服务(SRDS):在路由配置较大时,分块提供路由信息。
- 监听器发现服务(LDS):提供监听器的详细信息,包括端口、地址和关联的过滤器。
- 扩展配置发现服务(ECDS):提供扩展配置,如 HTTP 过滤器。
- 路由发现服务(RDS):提供路由信息,包括集群引用。
- 虚拟主机发现服务(VHDS):提供虚拟主机的信息。
- 运行时发现服务(RTDS):提供运行时信息。
- 聚合发现服务(ADS):允许通过单个 API 接口交付所有 API 及其资源。
- 增量聚合发现服务(DxDS):仅包含需要添加/删除/更新的资源,减少带宽使用和计算成本。
3.4 Envoy 的可扩展性
Envoy 的过滤器架构使其具有高度可扩展性,可以使用过滤器库中的各种过滤器,也可以编写自定义过滤器。目前有三种编写 Envoy 过滤器的选项:
-
原生 C++ API
:编写原生 C++ 过滤器并与 Envoy 打包,但需要重新编译 Envoy。
-
Lua 过滤器
:使用内置的 HTTP Lua 过滤器,允许在请求和响应流程中执行 Lua 脚本。
-
Wasm 过滤器
:使用首选编程语言编写过滤器,编译为 WebAssembly(Wasm),由 Envoy 在运行时动态加载。
综上所述,Istio 通过其控制平面和数据平面的协同工作,结合各种可观测性工具和强大的 Envoy 代理,为微服务架构提供了全面的服务网格解决方案。在实际应用中,可以根据不同的需求和场景选择合适的部署模型和配置方式,以实现高效、安全和可观测的微服务通信。
4. 总结与展望
4.1 总结
通过前面的介绍,我们对 Istio 的各个方面有了较为深入的了解。Istio 的控制平面包含了 istiod 等关键组件,istiod 统一了多个组件的功能,简化了安装和操作。它具备配置监控、API 验证、证书管理等重要功能,同时控制平面还涉及边车注入、节点代理、身份管理和用户上下文传播等功能和组件。
在部署模型上,单集群本地控制平面适用于简单的单集群环境;单控制平面的主集群和远程集群模式可实现多集群共享控制平面,但需要额外的互连配置;单集群外部控制平面则满足了安全和合规性要求。
数据平面的核心是 Envoy 代理,它具有独特的线程模型、灵活的过滤器架构和强大的配置能力。通过 HTTP 过滤器和监听器过滤器,Envoy 可以对请求进行精细的处理和路由。同时,借助 xDS API 实现动态配置,以及支持自定义过滤器的可扩展性,使得 Envoy 能够适应各种复杂的应用场景。
| 组件/特性 | 描述 |
|---|---|
| Istio 控制平面 | 由 istiod 等组成,负责服务发现、配置传播、证书管理等 |
| 控制平面部署模型 | 单集群本地、单控制平面主/远程集群、单集群外部 |
| Envoy 代理 | 数据平面核心,具备独特线程模型、过滤器架构和动态配置能力 |
| Envoy 过滤器 | HTTP 过滤器和监听器过滤器,实现请求处理和路由 |
| xDS API | 实现 Envoy 动态配置 |
| Envoy 可扩展性 | 支持原生 C++、Lua、Wasm 编写自定义过滤器 |
4.2 展望
在未来的微服务架构中,Istio 和 Envoy 的组合将继续发挥重要作用。随着微服务的不断发展,对服务网格的功能和性能要求也会越来越高。Istio 可以进一步优化其控制平面的性能和稳定性,提供更丰富的配置选项和管理功能。例如,在多集群环境下,如何更高效地实现控制平面的跨集群管理和配置同步,是一个值得研究的方向。
对于 Envoy 而言,其可扩展性将成为应对各种复杂业务需求的关键。随着 WebAssembly 技术的不断发展,Wasm 过滤器的应用可能会更加广泛,开发者可以使用更多熟悉的编程语言来编写自定义过滤器,从而降低开发门槛。同时,Envoy 也可以进一步优化其线程模型和配置管理,提高处理大规模流量的能力。
在实际应用中,企业可以根据自身的业务需求和技术栈,灵活选择 Istio 的部署模型和 Envoy 的配置方式。例如,对于安全要求较高的企业,可以选择单集群外部控制平面的部署方式;对于需要快速迭代和定制化的业务场景,可以充分利用 Envoy 的可扩展性来实现自定义功能。
总之,Istio 和 Envoy 为微服务架构提供了强大的支持,未来它们将在不断的发展和创新中,为企业的数字化转型和业务发展提供更有力的保障。
5. 实践操作建议
5.1 安装和配置 Istio 可观测性工具
如果你想在自己的环境中体验 Istio 的可观测性工具,可以按照以下步骤进行操作:
1.
安装 Istio
:使用
istioctl
工具进行 Istio 的安装,确保环境满足 Istio 的安装要求。
2.
启用边车注入
:为托管微服务的命名空间应用
istio-injection: enabled
标签,启用边车注入。
3.
安装可观测性工具
:
-
Kiali
:
$ kubectl apply -f samples/addons
$ kubectl rollout status deployment/kiali -n istio-system
$ istioctl dashboard kiali
- **Jaeger**:
$ istioctl dashboard jaeger
- **Prometheus**:
$ istioctl dashboard prometheus
- **Grafana**:
$ istioctl dashboard grafana
5.2 配置 Envoy
如果你想深入了解 Envoy 的配置和使用,可以按照以下步骤进行实践:
1.
下载 Envoy Docker 镜像
:
$ docker pull envoyproxy/envoy:v1.22.2
-
创建简单的 Envoy 配置文件
:参考前面提供的
envoy-config-1.yaml示例,创建自己的配置文件。 - 运行 Envoy 容器 :
docker run –rm -it -v $(pwd)/envoy-config-1.yaml:/envoy-custom.yaml -p 9901:9901 -p 10000:10000 envoyproxy/envoy:v1.22.2 -c /envoy-custom.yaml
-
测试 Envoy 配置
:使用
curl工具测试 Envoy 的响应,例如:
$ curl localhost:10000
5.3 编写 Envoy 自定义过滤器
如果你想尝试编写 Envoy 自定义过滤器,可以根据自己的技术栈选择合适的方式:
-
Lua 过滤器
:
1. 了解 Envoy 内置的 HTTP Lua 过滤器
envoy.filters.http.lua
。
2. 编写 Lua 脚本,可以在请求和响应流程中执行自定义逻辑。
3. 将 Lua 脚本配置到 Envoy 中,进行测试。
-
Wasm 过滤器
:
1. 选择熟悉的编程语言编写过滤器代码。
2. 将代码编译为 WebAssembly(Wasm)模块。
3. 配置 Envoy 加载 Wasm 模块,进行测试。
通过以上实践操作,你可以更好地掌握 Istio 和 Envoy 的使用,为实际项目中的应用打下坚实的基础。同时,不断探索和尝试新的配置和功能,将有助于你在微服务架构中发挥 Istio 和 Envoy 的最大价值。
2397



被折叠的 条评论
为什么被折叠?



