又崩了?盘点2023年十大线上事故!

重大安全事件,10亿中国键盘应用用户遭难,众多国内大厂中枪;漂亮国支持黑客利用0day漏洞进行间谍活动;“七年之痛”?利用Office七年前的旧漏洞攻击乌克兰; | 安全周报0428 关键词:拼音键盘应用、百度、华为、0day漏洞、npm包、WordPress、WP-Automatic插件 阅读详情

2023 年,互联网世界日新月异,线上应用已成为我们生活中不可或缺的一部分。然而,在这一年里,一系列令人咋舌的线上事故频频发生,“XXX 崩了”成为热搜常客。这些事故不仅给用户带来了不便和困扰,也暴露出线上服务在稳定性、安全性和应对突发事件的能力方面存在的问题。本文将盘点 2023 年的十大线上事故,以期为未来的线上服务提供借鉴和警示。

哔哩哔哩

3 月 5 日晚,B 站出现服务器故障,网页端和移动端的视频均无法加载,转发的视频链接显示“资源失效”。

图片

受影响的主要是“番剧”和“影视”页面,用户反映“追番一直提示获取视频内容失败”、“显示页面加载失败”、“看番看一半加载不出来”。还有用户反映,首页能够加载,但全部是繁体字。

图片

6 月 28 日,不少用户反应“B 站崩了”,该词条随后上了热搜。用户反映“追番一直提示获取视频内容失败”“显示页面加载失败,你们也这样吗?”“看番看一半加载不出来,我以为我的网有问题”。

该问题持续了一个多小时才被解决。

腾讯

3 月 29 日凌晨,大量网友称微信、QQ 等腾讯旗下社交软件出现功能异常。微信包括语音呼叫、账号登录、朋友圈以及支付在内的多个功能无法正常使用,QQ 文件传输、QQ 空间、QQ 邮箱等也同样出现问题。

图片

腾讯客服对此回应称,由于系统故障,部分用户使用微信支付相关功能出现异常,目前正在紧急修复中。用户资金安全不受影响。故障修复后,相关功能使用将恢复正常。

图片

此次事故是由广州电信机房冷却系统故障导致,腾讯将其定义为公司一级事故。

事后,工信部通信管理局就微信“3.29 事件”约谈了腾讯相关人员,听取了情况汇报,并要求腾讯公司进一步健全安全生产管理制度、落实网络运行保障措施,坚决避免发生重大安全生产事故,切实提升公众业务安全稳定运行水平。

图片

12 月 3 日, 腾讯视频突然没有会员了。

图片

对此,腾讯视频官方微博回应:目前腾讯视频出现了短暂技术问题,我们正在加紧修复,各项功能在逐步恢复中。感谢您的耐心等待,由此给您带来的不便我们深感歉意。

图片

 

唯品会

3 月 29 日,“唯品会崩了”登上微博热搜。唯品会对此进行了回应:

图片

事后,唯品会发布了一份处理公告,将 329 机房宕机故障判定为 P0 级故障。官方在公告中称,此次南沙机房重大故障影响时间持续 12 个小时,导致公司业绩损失超亿元,影响客户达 800 多万。唯品会表示,决定对此次事件严肃处理,对应部门的直接管理者承担此次事故责任,基础平台部负责人予以免职做相应处理。

Boss 直聘

5 月 24 日,网友反映 Boss 直聘崩了。随后 Boss 直聘回应称:今日上午部分用户使用 boss 直聘 pc 端时,部分功能出现异常,经过紧急抢修,目前已恢复。

7 月 6 日,许多用户打开 BOSS 直聘,发现页面中显示“系统服务错误”,无法正确切换身份。还有网友表示,正和求职者聊着,要马上约面试了,结果就崩了。BOSS 直聘也于当天发布消息称,“7 月 6 日上午,BOSS 直聘 APP 出现短时间服务异常,经过团队抢修已恢复正常。期间为用户带来的不便我们深表歉意。我们将持续优化服务保障。感谢大家一直以来的关注与支持”。

9 月 15 日,“BOSS 直聘”突然崩溃,许多用户无法刷新页面,无法查看新的招聘信息,甚至无法进行聊天交流。

在社交媒体上,一位自称是 BOSS 直聘员工表示,金九银十是招聘旺季,2023 年 9 月 15 日 10 点 15 分 26 秒,在线统计超过 4700 万人在刷 BOSS 页面,目前服务器超荷载,正在维护,找工作的人比国庆买票的人还着急。

BOSS 直聘回应称,关注到一张网传截图。服务器崩了,是真的。技术要改进,是真的。网传的数据,是假的。请大家不信谣,不传谣。据最新数据,每月使用 BOSS 直聘的用户,4360 万人。”

图片

 

语雀

10 月 23 日,蚂蚁金服旗下的在线文档编辑与协同工具语雀发生了前所未有的 P0 级事故,导致平台无法正常访问和使用,持续了近 8 个小时(14:10 至 21:45)

图片

事后,语雀给出了故障原因及处理过程:

10 月 23 日下午,服务语雀的数据存储运维团队在进行升级操作时,由于新的运维升级工具 bug,导致华东地区生产环境存储服务器被误下线。受其影响,语雀数据服务发生严重故障,造成大面积的服务中断。为了尽快恢复服务,我们和数据存储运维团队全力进行数据恢复工作,但受限于恢复方案、数据量级等因素,整体用时较长。具体过程如下:

  • 14:07 数据存储运维团队收到监控系统报警,定位到原因是存储在升级中因新的运维工具 bug 导致节点机器下线;

  • 14:15 联系硬件团队尝试将下线机器重新上线;

  • 15:00 确认因存储系统使用的机器类别较老,无法直接操作上线,立即调整恢复方案为从备份系统中恢复存储数据。

  • 15:10 开始新建存储系统,从备份中开始恢复数据,由于语雀数据量庞大,此过程历时较长

  • 19 点完成数据恢复;同时为保障数据完整性,在完成恢复后,用时 2 个小时进行数据校验;

  • 21 点存储系统通过完整性校验,开始和语雀团队联调,最终在 22 点恢复语雀全部服务。用户所有数据均未丢失。

以及改进措施:

通过这次故障我们深刻认识到,语雀作为一款服务千万级客户的文档产品,应该做到更完善的技术风险保障和高可用架构设计,尤其是面向技术变更操作的“可监控,可灰度,可回滚”的系统化建设和流程审计,从同 Region 多副本容灾升级为两地三中心的高可用能力,设计足够的数据和系统冗余实现快速恢复,并进行定期的容灾应急演练。只有这样,才能提升严重基础设施故障时的恢复速度,并从根本上避免这类故障再次出现。为此我们制定了如下改进措施:

  1. 升级硬件版本和机型,实现离线后的快速上线。该措施在本次故障修复中已完成;

  2. 运维团队加强运维工具的质量保障与测试,杜绝此类运维 bug 再次发生;

  3. 缩小运维动作灰度范围,增加灰度时间,提前发现 bug;

  4. 从架构和高可用层面改进服务,为语雀增加存储系统的异地灾备。

并针对语雀个人用户,赠送了 6 个月的会员服务。

阿里云

11 月 12 日 17 时左右,阿里云突然出现事故,导致阿里云、淘宝、闲鱼、钉钉等几乎阿里全系应用都出现了问题。19 时 20 分左右,经工程师紧急处理,阿里旗下淘宝、钉钉、阿里云盘等应用已全面恢复。

图片

据统计,这次异常的影响范围涉及 API 网关、视频点播、运维事件中心在内的 100 多个产品,北京、硅谷、伦敦等 25 个地域受影响。

事后,阿里云并未对外公布事故原因。不过网上流传着一份事故报告,仅供参考:

图片

 

滴滴

11 月 27 日晚,滴滴出行出现系统崩溃,至 28 日修复,崩溃时间长达 12 小时。11 月 29 日,滴滴公布了此次超长时间系统故障的致歉声明。初步调查结果显示,这起事故的起因是底层系统软件发生故障,并非网传的“遭受攻击”。

图片

这次事故发生时,上海、北京、广州等多地滴滴用户反馈,滴滴出行 APP 无法使用,地图无法加载。有网友称,使用滴滴呼叫了网约车后,APP 突然无法使用,司机找不到乘客。有网约车司机在社交平台表示,正在送乘客途中,出现导航无法使用,地图无法加载等情况。

图片

 

喜马拉雅

12 月 19 日,不少网友反馈,喜马拉雅 App 出现崩溃状况,无法正常使用或聆听节目。随后,喜马拉雅官博发文致歉,称目前已紧急修复,不会影响用户的会员等权益。

图片

 

Chatgpt

11 月 8 日 22:00 开始,不少网友反馈 OpenAI 的 ChatGPT,包括 API 都无法正常使用。OpenAI 出现故障的时间大约持续了 100 分钟,

图片

事后,OpenAI 也已经把这回的故障,定性为了「严重停机」(Major Outage)。OpenAI 表示发现一个问题,导致 ChatGPT 和 API 错误率很高,正在努力解决。直到 23:33,OpenAI 表示确定并实施了修复方案,服务逐渐恢复正常。

图片

OpenAI CEO 奥特曼表示,devday(开发者大会)新功能的使用情况远远超出预期,公司原计划周一为所有订阅者启用 GPT,但仍未能实现。由于负载的原因,短期内可能会出现服务不稳定的情况。

图片

 

X

12 月 21 日,国外知名社交平台 X(原推特)遭遇突发崩溃事故。许多用户反映无法正常加载页面、浏览个人资料、查看粉丝列表等操作,该社交平台几乎处于瘫痪状态。

这已是 X 平台今年第二次大规模宕机事件。早在今年 3 月,该平台便经历了一次全球性中断。自 440 亿美元收购后,马斯克对其进行了大幅裁员,裁员幅度接近 80%,其中包括许多负责修复和防止服务中断的工程师。

电机FOC控制实战:STM32 CubeMX配置六路互补PWM与死区优化 本文详细介绍了如何使用STM32 CubeMX配置六路互补PWM与死区优化,实现电机FOC控制。通过实战经验分享,包括时钟配置、定时器设置、死区时间计算及优化技巧,帮助开发者避免常见问题,提升电机控制性能。特别适用于STM32G4系列的无刷电机驱动应用。 阅读详情

相关推荐

【华为Hilink SDK Linux系统开发】目录 开源一小步

目录 【华为Hilink开发】第一章:华为hilink平台简介及开发流程 【华为Hilink开发】第二章:华为hilink SDK网络适配、网关添加删除 【华为Hilink开发】第三章:华为hilink SDK子设备添加、删除 【华为Hilink开发】第四章:华为hilink SDK子设备控制及同步 【华为Hilink开发】第五章:华为hilink SDK适配遇到的问题 ...

开源一小步 3622

线上事故复盘报告模板

前言:线上事故复盘报告模板分享 线上事故复盘报告模板一、事故级别定义二、事故发生背景三、事件回顾四、事故产生原因分析五、事故处理办法六、针对事故的反省及改进措施:七、处罚策略(可选)八、疑问解答与加群交流学习 一、事故级别定义 P0:核心业务重要功能不可用且大面积影响用户; 响应时间:立即 P1: 核心业务重要功能不可用,但影响用户有限,如仅影响内部用户; 响应时间:小于15分钟 P2 :核心业务周边功能不可用,持续故障将大面积影响用户体验; 响应时间:小于15分钟 P3: 周边业务功能不可用,轻微影响用户

李文良的博客 5万+

别再手动写用例了!用AI Agent自动生成测试用例的保姆级实战(附Python代码)

本文详细介绍了如何利用AI Agent技术自动生成测试用例,大幅提升测试工程师的工作效率。通过Python代码实战演示,从环境搭建到核心Agent构建(需求解析、场景挖掘、用例编排),再到与企业工具链(TestRail、Jira)的深度集成,帮助团队实现测试用例的智能化生成与管理。

weixin_30897233的博客 649

字节跳动一面,汗流浃背。

大家好,我是二哥呀。应该是上周,有球友在 VIP 群里报喜,说字节已经 OC 了。字节有很多优点,比如说 TikTok 真正做到了全球化,抖音更是成为微信后又一个国民级的应用。但字节同时也存在一些问题,比如说加班严重,字节一年人间三年并非空穴来风;还有就是抖音的短视频几乎成为当下最没有养分的“精神安眠药”。但对于绝大多数的小伙伴来说,能去字节这个互联网大厂,已经是职业生涯中最优的选择之一。

沉默王二 2600

Android13 AudioFlinger混音流程全解析:从prepareTracks_l到threadLoop_write的底层实现

本文深入解析Android13 AudioFlinger混音流程,从prepareTracks_l到threadLoop_write的底层实现。详细剖析MixerThread的核心工作循环,包括音轨预处理、混音算法执行及硬件写入机制,帮助开发者优化音频性能并处理多音轨场景。

tea88的博客 1132

Stata面板数据OLS回归分析实战指南

OLS回归作为计量经济学的核心分析方法,通过最小化残差平方和实现参数估计,广泛应用于经济学实证研究。其技术价值在于模型简洁、结果易于解释,特别适合处理面板数据中的复杂关系。在实际应用中,配合robust标准误能有效解决异方差问题,而固定效应模型则可控制个体特异性。本文以Stata软件为例,详细演示从数据导入、描述性统计到混合OLS和固定效应模型构建的全流程,重点解析面板数据特有的格式设定、模型选择标准以及结果呈现技巧,为经济学研究者提供可直接复用的分析框架。

weixin_29051811的博客 270

字节一面:Redis主节点宕机,如何处理?

若有收获,请记得分享和转发哦今天跟大家聊下,如果Redis某个节点宕机了,要怎么处理?我们知道,Redis集群一般采用主从模式,主节点负责写,从节点负责读。从节点故障从节点主要提供读服务,...

IT技术精选文摘 678

遗传算法驱动吃豆人进化:从零构建AI游戏智能体

遗传算法是一种模拟自然选择过程的优化技术,其核心原理是通过选择、交叉和变异等操作,在解空间中迭代搜索最优解。该技术为解决复杂优化问题提供了强大工具,尤其在游戏AI、机器人控制和参数调优等场景中价值显著。在游戏AI领域,遗传算法常被用于训练智能体自主决策,例如在经典游戏《吃豆人》中,通过定义智能体的“基因”(如神经网络权重)和“适应度”(如游戏得分),可以引导其进化出躲避幽灵、高效吃豆等策略。本项目结合Pygame框架与神经网络,构建了一个完整的遗传算法训练沙盒,详细展示了如何通过适应度函数设计和参数调优,实

weixin_30467199的博客 273

又又又崩了?盘点 23 年十大线上事故!

以下文章来源于前端充电宝 ,作者CUGGZ2023 年,互联网世界日新月异,线上应用已成为我们生活中不可或缺的一部分。然而,在这一年里,一系列令人咋舌的线上事故频频发生。“XXX 崩了” 成为热搜常客。这些事故不仅给用户带来了不便和困扰,也暴露出线上服务在稳定性、安全性和应对突发事件的能力方面存在的问题。本文将盘点 2023 年的十大线上事故,以期为未来的线上服务提供借鉴和警示。

骑着牛的奇兵的博客 1867

从零开始安装 Windows 11 和 Ubuntu 22.04 双系统

本文详解Windows与Ubuntu 22.04双系统安装流程:需提前确认BIOS模式(UEFI/GPT或Legacy/MBR),关闭BitLocker加密、设备加密及快速启动;推荐Rufus/Ventoy制作启动盘。安装时需规划分区方案(建议单独划分EFI系统分区),注意引导器安装位置选择。双系统启动通过BIOS引导顺序管理,安装后需同步Windows与Linux系统时间。教程适配主流UEFI+GPT设备,强调操作前数据备份及Windows更新策略调整,避免兼容性问题。

萑澈的博客 3777

【RK3399 Ubuntu】基于rk3399的lxde的lubuntu桌面移植适配记录之第二步:最基本Ubuntu根文件系统的相关常用工具完善

文章目录1.使能系统网络管理服务1.1 安装驱动modules管理工具1.2 使能网络服务2.终端自动补全命令功能3.安装ssh服务4.安装系统信息查看工具5.安装resize工具6.安装lrzsz工具7.使能rc.local服务7.1 修改服务Install块7.2 使能rc.local.service服务7.3 添加执行脚本且赋予执行权限 续接上文,本文主要完善前面已经制作好的rootfs 1.使能系统网络管理服务 1.1 安装驱动modules管理工具 apt-get install kmod 1.

wang 恒 的博客 1387

【2023特辑】最具影响力的十大网络安全事件

2023年10月下旬,波音公司遭遇LockBit勒索软件攻击,2023年10月27日,LockBit在数据泄露站点发消息声称窃取了波音的大量敏感数据,并以此胁迫波音公司,如果不在2023年11月2日前与LockBit组织取得联系,将会公开窃取到的敏感数据。据彭博社报道,对工商银行美国子公司的攻击已经扰乱了美国国债市场。被业内人士定性为网络安全“灾年”的2023年已经翻篇,但过去一年发生的创记录的数据泄露、勒索软件、零日漏洞、间谍软件和供应链攻击事件已经为2024年全球网络安全威胁态势定下了主旋律和基调。

weixin_68789096的博客 2174

LVS 负载均衡面试题及参考答案

什么是 LVS 负载均衡?它的主要作用是什么? LVS(Linux Virtual Server)是一个基于 Linux 内核的开源负载均衡项目。它通过将请求流量按照一定的算法分发到后端的多个真实服务器(Real Server)上,从而实现负载均衡的功能。 从原理上来说,LVS 工作在网络层和传输层之间。当客户端发起请求时,请求首先到达 LVS 服务器,LVS 会根据预先设定的规则和算法,比如轮询(Round - Robin)、加权轮询(Weighted Round - Robin)、最少连

大模型大数据攻城狮的专栏 1470

以远见超越未见丨硬核盘点之2023十大网安事件

2023年2月12日,中央网信办发布消息,近期“江西学生胡某宇事件”持续引发网民关注,网上相关谣言不断发酵,严重误导公众判断,造成恶劣社会影响。对此,网信部门督促网站平台认真履行信息内容管理主体责任,严厉打击网上借机造谣传谣以及恶意营销炒作行为。抖音、腾讯、微博、快手、百度、哔哩哔哩、小红书等重点网站平台深入开展排查整治,累计处置违法违规账号1894个,坚决遏制无底线造谣炒作的势头,切实维护良好网络生态。

2401_84466225的博客 3033

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

2023年网络攻击事件

勒索软件事件发生不久后,威胁攻击者将盗取的数据信息发布在NoEscape勒索软件团伙泄露网站上,并在泄密帖子宣称盗取了ASVEL篮球队共32GB的数据,其中主要包括球员的护照和身份证、ASVEL的财务和税务数据、保密协议 (NDA)、球员球探合同以及其他机密信息。Dragos表示其公司网络和安全平台在攻击中并未遭到破坏,攻击者的横向移动、提权、加密、驻留等攻击手段大多被Dragos的多层安全控制和基于角色的访问控制挫败了,但攻击者成功入侵了该公司的SharePoint云服务和合同管理系统。

lianafany的博客 1829

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

2024年十大新兴网络安全威胁

2023年勒索软件、供应链攻击、地缘政治冲突与黑客活动主义、国家黑客间谍与APT组织活动成为网络安全的热点话题,生成式人工智能技术的武器化更是给动荡的全球网络安全威胁态势增加了不确定性、不对称性和复杂性。即将到来的2024年,随着网络犯罪的规模化和新兴网络威胁的快速增长,防御者将面临前所未有的艰巨挑战。根据Cybersecurity Ventures的预测,到2024年底,网络攻击给全球经济造成的损失预计将高达10.5万亿美元。

Spontaneous_0的博客 3946

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

2023年最具影响力的十大网络安全事件

2023年,网络攻击和数据泄露事件频繁发生,波及范围广泛,对全球知名企业组织构成了严重威胁,不仅受到监管合规压力,还面临社会舆情的负面影响。

2301_76786857的博客 1495

回顾2023年,预测2024年Top10新兴的网络安全威胁

2023年这一年发生了各类勒索软件、数据泄露、供应链攻击、地缘政治冲突、组织性质的黑客活动、国家层面的黑客攻击与APT组织活动,这些安全威胁随着对现实世界的影响越来越大,也成为全球网络安全的热点话题,生成式人工智能技术ChatGPT的武器化、易用性、上手难度低,更是给动荡的全球网络安全威胁态势增加了不确定性、不对称性和复杂性。当我们回望2023年的各类安全事件,即将到来的2024年会给网络安全从业者带来前所未有的艰巨挑战,规模化和快速增长的黑客攻击行为将会带来更高的损失。

qq_41432686的博客 1997

从 Gartner 2023 年重要战略技术趋势看 SRE 的发力点

透过 Gartner 发布的 2023 年十大战略技术趋势,思考 SRE 的未来发展和发力点。

运维夜谈 615

西安交警发布2023年十大交通精细化治理案例

来源:智慧交通2023年西安公安交警遵循特大城市发展规律、聚焦交通供需矛盾痛点,坚持以人民为中心,紧紧围绕出行更安全、道路更畅通、管理更智能的交管核心目标,转变思想观念、拥抱数据时代,深入开展城市交通“数字精细化”治堵治乱提升行动,交通治理效能在智慧韧性上实现了新突破。百度、高德地图发布的中国城市交通报告显示,2023年三季度西安市通勤高峰交通拥堵指数环比下降1.89%,通勤时间缩短1.93%,交...

weixin_55366265的博客 280

案例网络安全信息披露_安全419盘点 | 2023年第三季度全国数据安全及个人信息泄露大事记_新手漏洞指南

安全419盘点 | 2023年第三季度全国数据安全及个人信息泄露大事记,公安,信息泄露,网络安全,隐私数据,数据安全

程序员三九的博客 2302
上一篇: 2024 U.S.News全球大学排名发布,中国有哪些大学入围全球前100?
下一篇: 能ping通,TCP就一定能连通吗?
IT界那些事儿
博客等级 码龄6年 2万+粉丝 22原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值