Kubernetes-Informer学习笔记-1

K8s List-Watch与Informer机制解析
最新推荐文章于 2025-06-25 14:13:55 发布
原创 最新推荐文章于 2025-06-25 14:13:55 发布 · 328 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kuberntes #informer

博客介绍了K8s的List-Watch机制，全量与增量事件结合可保证消息可靠、实时、高性能，纯使用某一种会有压力且难满足实时性。还阐述了K8s每个资源的特点，以及Informer作为核心工具包，维护缓存、监听事件、触发回调等功能。

List-Watch机制

  • List：全量事件
  • Watch：增量事件

两者结合可以保证消息的可靠性、实时性、高性能。如果纯使用List也能获取所有事件，但是这会对ApiServer造成很大的压力，也很难满足实时性！

K8s每个资源的ResourceVersion

k8s的每个资源都会带有resourceVersion字段，数字递增

Informer

  • clinet-go中的一个核心工具包，List/Get k8s中的所有Object
  • Informer会自己维护一个缓存，以便更快的返回资源信息
  • Informer只会调用k8s的List、Watch两种API
  • 可监听事件并触发回调函数
    Informer中可以添加自定义的回调函数：OnAdd()、OnUpdate()、OnDelete()，在Controller的设计实现中，会经常用到Informer这个功能

在这里插入图片描述

  1. Informer在初始化时，会先调用List获取所有资源（仅调用1次）
  2. 将List得到的资源全部写入本地缓存
  3. Watch Kubernetes Api资源，维护本地缓存

DeltaFIFO：存储Informer Watch返回的各种事件

LocalStore：只会被Lister的List/Get方法访问

DeltaFIFO和LocalStore之间存在resync机制！！！

【云原生进阶之容器】第二章Controller Manager原理2.4节--Informer机制剖析
junbaozi的专栏
01-05 733
client-go 包中一个非常核心的工具就是 informer，informer 可以让与 kube-apiserver 的交互更加优雅。Informer 另外一块内容在于提供了事件 handler 机制，并会触发回调，这样 Controller 就可以基于回调处理具体业务逻辑。
Kubernetes 和 Kubeflow 学习笔记
不是很呆D
10-15 1821
Kubeflow是Kubernetes的机器学习工具包。Kubeflow是运行在K8S之上的一套技术栈，这套技术栈包含了很多组件，组件之间的关系比较松散，我们可以配合起来用，也可以单独用其中的一部分。下图是官网显示Kubeflow作为在Kubernetes上安排ML系统组件的平台：当我们开发和部署ML系统时，ML工作流程通常包括几个阶段。开发ML系统是一个反复的过程。我们需要评估ML工作流各个阶段的输出，并在必要时对模型和参数进行更改，以确保模型不断产生所需的结果。
深度学习算法informer（时序预测）（七）（模型训练、验证、测试）
weixin_43336108的博客
06-21 509
模型训练、验证、测试。
Informer笔记
Data _designer
03-08 830
已有研究及存在的问题：Transformer时间复杂性，高内存占用（由于Self Attention的点积），固有的encoder-decoder缺陷（需要进行Encoder和Decoder的叠加） 导致无法进行Long Sequence Prediction，Step-by-Step预测（Decoder需要step生成新的Hidden State） 作者对应提出的措施：ProbSparse Self Attention Mechanism；Self Attention Distilling；一次性预测而
深度学习算法informer（时序预测）（六）（数据处理、自注意力、自适应调节学习率、早停法）
weixin_43336108的博客
06-21 697
在每个epoch结束时，根据当前的epoch和设定的调整策略，更新优化器的学习率。目的是在验证损失不再显著改善时提前停止训练，从而防止过拟合。它会在每个epoch结束后调用，检查当前的验证损失是否改善。，特征值只有温度，解码器的输入与编码器的输入不同，将。编码器的输入倒数12个时间点。编码器最后12个时间点。
深度学习算法informer（时序预测）（一）（数据编码讲解）
weixin_43336108的博客
06-18 4510
informer时序数据编码
深度学习（19）——informer 详解（1）
羊羊的博客
04-10 5488
transformer 长时间序列预测
Kubernetes源码学习笔记整理
综上所述，这份“keep k8s sourcecode note.zip”资料极可能是围绕 Kubernetes 主节点各组件的源码级学习笔记，涵盖 API Server 的请求处理流程、控制器的调谐机制、调度器的决策逻辑、etcd 的状态同步方式以及整体...
图解kubernetes中informer机制基础设计原理
8小时_公共号:图解源码
03-09 423
kubernetes中的informer机制可能是实现集群控制模块的最核心的设计之一了，本文从informer如何获取数据开始,然后介绍了为了减少apiserver而设计的缓存、索引、无界队列、共享informer等机制欢迎一起交流学习 1. informer的本质 1.1 设计目标 之前说到kubernetes里面的apiserver的只负责数据的CRUD接口实现，并不负责业务逻辑的处理，所以...
华为云云原生王者之路钻石集训营--学习笔记
MINGSON666的博客
08-15 1073
目录 云原生钻石课程开篇直播 容器运行时技术深度剖析 Kubernetes技术架构深度剖析 Kubernetes高级调度器原理详解 Kubernetes存储架构原理深度剖析（上） Kubernetes存储架构原理深度剖析（下） Kubernetes网络架构原理深度剖析（上） Kubernetes网络架构原理深度剖析（下） Kubernetes运维管理详解（上） Kubernetes运维管理详解（下） Kubernetes安全权限管理深度剖析 Kubernetes应用管理深度剖析 I
深度学习量化分析：使用Informer进行时间序列预测
最新发布
weixin_35906794的博客
06-25 1065
时间序列预测是指利用历史时间序列数据来预测未来一段时间内数据点的值。它在许多领域都有应用，比如金融市场分析、天气预报、能源需求预测和供应链管理等。准确的时间序列预测能够帮助企业或机构做出更为科学的决策，提升效率和降低成本。时间序列预测是利用历史时间序列数据来预测未来时刻的值。它在金融市场分析、能源消耗预测、天气预报等众多领域都有广泛的应用。时间序列数据点是按时间顺序排列的观测值，它们可以是连续的也可以是离散的。从时间序列预测的基本概念出发，我们需要理解它的定义以及如何构建模型来处理这类数据。
Kubernetes Informer 详解
纵横四海的博客
10-15 2345
Informer 简介这边文章只是个人爱好转载，不提供任何的意见和建议Informer 基础功能Informer 是 Client-go 中的一个核心工具包。在 Kubernetes 源码中，如果 Kubernetes 的某个组件，需要 List/Get Kubernetes 中的 Object，在绝大多 数情况下，会直接使用 Informer 实例中的 Lister()方法（该方法包含 了 Get
k8s List-Watch
国产-达芬奇
03-29 1991
k8s List-Watch k8s系统组件之间使用HTTP协议通信，使用HTTP协议实现这么复杂的系统功能，一定是有他的过人之处。 List-Watch,顾名思义，就是由List和Watch两部分组成，List就是普通的HTTP短链接，可以获取各种资源的列表数据。 而Watch则是通过调用资源的Watch API监听资源变更时间，基于HTTP长链接实现。 Informer封装了list-watch的API，用户需要指定资源，编写时间处理函数，Add...
Kubernetes Informer 机制全解析教程
进击的Blazor
12-10 1150
在 Kubernetes（k8s）中，Informer 是一种极为关键的机制，用于缓存和高效检索资源对象信息，它能够有效减少对 API Server 的查询压力，并实现事件驱动的编程模型，使得客户端应用可以及时响应集群中资源的变化。通过以上对 Informer 机制核心源码的解析，我们可以深入理解其在 Kubernetes 集群中如何高效地管理资源对象信息，以及如何实现与客户端应用的有效交互，为开发基于 Kubernetes 的应用提供坚实的基础。一、Informer 概述。（三）事件处理及回调相关。
时间序列深度学习模型AAAI 2021论文之一Informer的主要代码解读、项目运作、自定义数据集使用
热门推荐
人生是一场修行
09-28 3万+
一、前言 本文章是对informer开源代码进行自定义数据集（就是如何修改代码以跑通自己的数据集，毕竟原代码仓库没有注释）的使用的代码修改和代码流程解释。 二、informer相关 论文：https://arxiv.org/abs/2012.07436 代码仓库：https://github.com/zhouhaoyi/Informer2020 简介：据网上说是被评为AAAI 2021最佳论文，其作者设计了一种专为LSTF （长序列时间序列预测）设计的基于Transformer的改进模型 Informer
【深度学习】——Informer模型
qq_48108092的博客
03-22 7264
Informer模型是一种用于时间序列预测的深度学习模型，由中国科学院自动化研究所的研究团队提出。与传统的RNN、LSTM、GRU等模型不同，Informer模型采用了一种新的注意力机制，能够很好地处理长期依赖和序列中的缺失值。
细读informer与项目学习
weixin_44790306的博客
04-17 8829
文章目录
【时间序列】AAAI21最佳论文Informer：效果远超Transformer的长序列预测神器！
AI蜗牛车
02-07 5096
炼丹笔记干货作者：一元，四品炼丹师Informer:最强最快的序列预测神器01简介在很多实际应用问题中，我们需要对长序列时间序列进行预测，例如用电使用规划。长序列时间序列预测（LSTF...
时间序列预测-深度学习方法
yanglee0
12-08 3957
一、LSTM class LSTM(nn.Module): def __init__(self, input_size=1, hidden_layer_size=100, output_size=1): super().__init__() self.hidden_layer_size = hidden_layer_size self.lstm = nn.LSTM(input_size, hidden_layer_size) sel
实现Kubernetes上Celo代理高可用性的proxy-informer工具
### Kubernetes **知识点：** - Kubernetes是一个开源平台，用于自动化容器化...文档的标签提示我们使用Go语言开发了这个工具，而提供的压缩包文件名`proxy-informer-main`可能是该工具的主执行文件或者主模块的名称。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值