- 作为生产系统的监管者,on-call工程师负责处理生产环境中即将或者正在发生的业务事故,以及评审对生产系统的变更请求。
- 紧急事件(incident)的定义是:一系列根本原因一致或者相关的事件和报警信息,这些事件应该在同一个事后报告中讨论
- 现代理论研究指出,在面临挑战时,一个人会主动或非主动(潜意识)地选择下列两种处理方法之一:
(a)依赖直觉,自动化、快速行动。
(b)理性、专注、有意识地进行认知类活动。
- 在应急事件处理过程中,最理想的方法论是这样的:在有足够数据支撑的时候按步骤解决问题,同时不停地审视和验证目前所有的假设。
- 让on-call SRE知道他们可以寻求外部帮助,对减轻on-call压力也很有帮助。最重要的资源有:
(a)清晰的问题升级路线。
(b)清晰定义的应急事件处理步骤。
(c)无指责,对事不对人的文化氛围
- 虽然给一个非常安静的系统on-call值班是很幸福的事情,但是当一个系统太稳定,或者SRE on-call的周期太长会发生什么呢?SRE团队运维压力不够也是一个不良现象。长时间不操作生产环境会导致自信心问题,包括自信心太强以及自信心不够。这些现象只有在下一次发生问题时,才会显现出来。
相关推荐
银河麒麟v10(x86_64)升级openssh实操成功
本文详细介绍了在银河麒麟V10系统上将OpenSSH从8.2p1升级至9.9p2版本的全过程。主要内容包括:系统环境确认、安装telnet备用连接、备份配置、卸载旧版本、安装新版本、服务配置与验证等关键步骤。特别强调了安全注意事项,如必须安装telnet作为备用连接、重要配置备份等。升级后提供了安全加固建议,包括修改SSH端口、禁用root登录等。文章还包含详细的故障排查方法和恢复方案,确保升级过程安全可靠。通过本教程,用户可以顺利完成OpenSSH版本升级,提升系统安全性。
以阿里为例,详解SRE的团队建设与职能分工
sre树
kmeans聚类分析结果怎么看_【Stata与机器学习】物以类聚-KMeans算法应用案例介绍...
古语有云:物以类聚,人以群分。KMeans是无监督机器学习中的聚类算法中最简单的一种——基于特征对样本进行归为不同的类,很好地阐述了‘物以类聚’这句话的精髓。机器学习又叫统计学习。既然都统计了,所以当然包括了计量经济学。所以一般来说,机器学习的算法类型远多于计量经济学。比如线性回归,这个算是机器学习算法中比较基础的部分。当然,计量经济学在回归分析、因果推断方面的造诣,也是普通机器学算法所不能比的。...
谷歌SRE与运维工作的思考
运维部门要保障产品业务稳定性,开发部门要想随时随地快速上线新功能,而线上的故障往往是由新的变更导致的——不管是新发布了版本,还是修改配置,或者是改变了用户某些行为导致流量负载产生变化,传...
Windows打印体系结构之Windows内置打印驱动程序
时间是一种很残酷的东西,它只会冲淡能够冲淡的,但也会洗尽铅华帮你留下该留下的。1.3.4、Windows内置打印驱动程序现在的Windows下的打印机驱动程序通常分为V4打印机驱动程序(V4 Printer Driver)、XPS打印机驱动程序(XPSDrv)、微软通用打印机驱动程序(Microsoft UniversalPrinter Driver)、微软PostScri...
本地部署了qwen2.5:0.8b ,对接openclaw 后,电脑卡的要死
OpenClaw 强制 16k 上下文 + 无限历史 + Agent 调度,把 0.8b 压垮。按上面配置:轻量化 + 限历史 + 驻留显存,电脑立刻不卡。
《Google SRE工作手册》系列读书分享之 B站SRE流程中心实践分享 (视频+文字版)
本期分享主题是B站SRE流程中心实践,本期分享内容为谈谈Google SRE工作手册、SRE业务流程化的挑战、流程中心设计与核心技术要素、B站流程中心实践,以及总结与展望。
使用sklearn学习多项式回归(三)
1,什么是线性 我们无数次提到”线性“这个名词。在支持向量机中,我们也曾经提到最初的支持向量机只能够分割线性可分的数据,然后引入了”核函数“来帮助我们分类那些非线性可分的数据。我们也曾经说起过,比如说决策树,支持向量机是”非线性“模型。所有的这些概念,让我们对”线性“这个词非常熟悉,却又非常陌生——因为我们并不知道它的真实含义。接下来我们看看线性回归模型改进的核心之一:帮助线性回归解决非线性问题。 1.1,变量之间的线性关系 ”线性“这个词用于描述不同事物时有着不同的含义。我们最常使用的线性是指“变量
SRE中Oncall的9条原则
今天来讨论一个话题,Oncall与稳定性。为什么要有Oncall,Oncall应该如何保障稳定性,Oncall的日常守则有哪些? 1 为什么要有Oncall呢? 我们可以从日常生活中寻找答案,大家肯定在晚上去过医院,那么应该去哪里呢,答案是急诊;医院的oncall制度的目的是最快的速度来保障病人的生命安全和健康。警察的oncall制度是什么110,警察的oncall目的最快的速度来保障社会的稳定;军队的oncall制度的目的是最快的速度来保障国家的安全。那么程序员的oncall是干什么呢,最...
C盘在同一时间突然多出100g的文件,请问是什么原因,以及是否能删除?
🏆本文收录于 《全栈Bug调优(实战版)》 专栏,该专栏专注于分享我在真实项目开发中遇到的各类疑难Bug及其深层成因,并系统提供高效、可复现的解决思路和实操方案。无论你是刚入行的新手开发者,还是拥有多年项目经验的资深工程师,本专栏都将为你提供一条系统化、高质量的问题排查与优化路径,助力你加速成长,攻克技术壁垒,迈向技术价值最大化与职业发展的更高峰🚀!
【无人机路径规划】基于强化学习实现多无人机路径规划
【无人机路径规划】基于强化学习实现多无人机路径规划
SRE Google运维解密 第11章 on-call轮值
on-call轮值 保证可以随时相应紧急问题,不管工作时间还是非工作时间 on-call 工程师的一天 on-call工程师承诺在分钟级别执行生产系统的维护需求,一般面向终端用户5分钟,非紧急30分钟。 响应时间与业务可靠性有关 收到报警信息,工程师必须ack,on-call 工程师即使定位并尝试解决问题,或可联系其他团队,或者升级请求支援 有主on-call 和副on-call ,相辅相成...
智能门禁:AI Agent的访客意图识别
随着人工智能技术的飞速发展,智能门禁系统已经成为现代安全管理的关键环节。本文深入探讨了AI Agent在访客意图识别中的应用,通过详细的分析和实例讲解,揭示了智能门禁系统的核心工作原理、算法实现及其在安全领域的重要作用。文章结构清晰,逻辑严谨,旨在为广大技术爱好者提供一次全面的技术盛宴。在当今社会,门禁系统已成为各类建筑和机构不可或缺的安全设施。随着信息安全意识的增强,传统门禁系统的局限性逐渐显现。例如,在访客管理方面,传统方法通常依赖于人工登记、身份验证等手段,不仅效率低下,而且容易出现漏洞。
《SRE:Google 运维解密》读书笔记12: on-call轮值 - SRE的“生命线”
on-call 轮值是 SRE 保障服务可靠性的核心机制,通过主副值班制、多地团队、25%运维时间红线和12小时≤2事件的质量标准,让应急响应可持续。关键点一句话概括on-call 的核心目标服务可靠性(分钟级响应)+ 团队可持续性(避免疲劳战)主副值班制主 on-call 负责主要响应,副 on-call 作为备份和协助多地团队优势避免夜间值班损害健康 + 控制团队规模保障熟悉度数量平衡纯运维时间 ≤ 25%,至少 50% 投入研发质量平衡。
NTscan扫描工具
ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。
Data-Structures-and-Algorithm-Analysis-in-Java.pdf
作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...
《SRE:Google 运维解密》读书笔记11: 基于时间序列数据进行有效报警 - 新型的监控
在正式进入第10章之前,有必要对“具体实践”这一部分的整体结构有所了解。章节主题核心内容第10章基于时间序列数据进行有效报警Borgmon、时间序列数据库、报警规则设计第11章on-call 轮值多地团队、轮值频率与生产环境熟悉度第12章有效的故障排查手段假设-排除法、常见陷阱第13-14章应急事件管理降低影响范围、管理事故响应第15-16章事后总结与根源分析无指责文化、事故跟踪系统第17章测试避免已知类型问题重复发生第18-22章容量规划与负载均衡Auxon、GSLB、BwE、连锁故障。
VB摄像头监控
该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制
《SRE Google运维解密》读书笔记
不能将碰运气当成战略。——SRE俗语书里建议 SLO 一定要写得足够具体。一个“系统要快”是没法执行的;一个“99% 的 Get RPC 在 100ms 内完成”,就可以进入监控、报警、容量规划和发布控制链路。90% 在 1ms 内完成99% 在 10ms 内完成99.9% 在 100ms 内完成这样可以把系统性能分布刻画得更清楚。书里特别强调,琐事不等于“我不喜欢做的事情”,也不等于所有行政杂务。运维服务中那些手工、重复、可自动化、战术性、没有长期价值,而且会随着规模线性增长的工作。手工性。
TMS_WebGMaps_1.9.8.0_Full_Source
TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder
Google SRE 读书笔记 扒一扒SRE用的那些工具
写在前面 最近花了一点时间阅读了《SRE Goolge运维解密》这本书,对于书的内容大家可以看看豆瓣上的介绍。总体而言,这本书是首次比较系统的披露Google内部SRE运作的一些指导思想、实践以及相关的问题,对于我们运维乃至开发人员都有一定的借鉴意义。 书中的一些思想也令我印象深刻,例如SRE工程师要保证投入50%的时间在项目上、错误预算、命运之轮、事故总结等等,对于从业者有很大的启发。...
关于SRE方法论的一些笔记
写在前面 阿里系列有一本《云原生操作系统Kubernetes》中作者在前言里讲到 Google开源的Kubernetes和《SRE Google运维解密》这本书是剑法和气功的关系 换句话讲Kubernetes是术,SRE Google运维解密是道 作为云原生基础设施的Kubernetes小伙伴么应该多少有些了解 但是对于SRE却很少有人谈及,和小伙伴分享一些SRE的基础知识 博文主要为《SRE Google运维解密》读书笔记整理 主要为第一部分,摘一些感觉重要。 傍晚时分,你坐在屋檐下,看着天慢慢.
SRE Google 运维解密 具体实践一
一、基于时间序列数据进行有效报警 Borgmon是google使用的时间序列监控系统,在开源软件中Prometheus是非常类似的一款工具。这个软件将收集时间序列信息作为监控系统的首要任务,同时发展了一种丰富的时间序列信息操作语言,通过使用该语言将数据转化为图表和报警。 因为总是会有大批量的服务器在上线、下线,建立和维护一个有效的服务注册、发现系统是很有必要的。上线的主机需要能主动让B
SRE Google 运维解密--管理
一、迅速培养SRE加入on-call 在SRE团队的职责中,主动性任务和被动性任务兼有,每个SRE团队都坚守的一个重要目标是:利用积极主动的办法,去减少和限制被动性工作的产生。 SRE培训课程 推荐的培训方式 错误的培训方式 设计一个具体的、有延续性的学习体验,以便学员跟进 通过给学员安排一些烦琐的工作(处理警报/工单)来培训
google sre运维解决 读后感 - 第一篇(1-15章)
刚看了几页,就收获颇丰,非常震撼。 SRE是DevOps在google的具体实践。 一件事儿有可能发生就真的很有可能发生。P01是阿波罗8号上面的一个程序,一旦被人按下,就有可能造成数据丢失,当时是有个程序员的孩子在模拟器上玩儿的时候发现的,这个时候程序员打算修复,但是被上级拒绝了,只能写到playbook里面,一单触发bug,需要重新上传数据。结果,终于有一天,一个宇航员触发了这个P01的程序,差
GOOGLE SRE 运维模式解读
Google SRE文化的精髓在于将软件开发和运维相结合,实现了自动化运维,从而提高了服务的可靠性和可维护性。SRE团队通过对生产环境的监控和分析,不断改进服务的性能和稳定性。此外,SRE团队还积极参与软件开发和架构设计,为产品的可靠性和可扩展性提供支持。
国内外大厂oncall情况大比拼!谷歌员工竟然抢着oncall?
如今国内互联网行业中,许多公司都会明里暗里要求程序猿们oncall,也就是24小时待命,随叫随到,不分白天黑夜,出了问题就打电话找人解决。比如这位小哥哥爆料自己曾经的遭遇:类似这样的事情还...
有效运维的 on-call 机制
[编者按]本文作者为陈伯龙,云告警平台OneAlert创始人,著《云计算与OpenStack》,在IT运营管理、云计算方面从业10多年。
《SRE:Google运维解密》
2019独角兽企业重金招聘Python工程师标准>>> ...
1093



被折叠的 条评论
为什么被折叠?



