GitHub.com跑了1200多台MySQL主机,如何无缝升级到8.0?

Laravel Docker Compose 实战:构建可复现的生产级PHP应用环境 Docker Compose 是解决 PHP 应用环境不一致、协作低效与依赖隐晦等核心问题的关键技术。其本质是通过声明式 YAML 文件定义服务拓扑,实现开发、测试、生产环境的完全一致;结合自定义 Dockerfile 精准控制 PHP 扩展、OPcache 与 FPM 进程模型,保障 Laravel 10.x 的运行时稳定性;再依托容器网络自动 DNS 解析(如 db、app 服务名直连),消除传统 nginx 配置文件详解和 mysql 安装教程中的手工误差。该方案已广泛应用于高并发 Laravel 项 阅读详情

GitHub 团队近日分享了他们将 GitHub.com 的底层数据库无缝升级到 MySQL 8.0 的经验。

据介绍,GitHub 使用 MySQL 来存储大量关系数据,因此在不影响网站服务级别目标 (SLO) 的情况下升级主机集群(1200 多台 MySQL 主机)绝非易事。其团队表示,为了升级到 MySQL 8.0,他们规划、测试和升级本身总共花费了一年多的时间,并且需要 GitHub 内部多个团队的协作。

图片

GitHub 的 MySQL 基础设施概览:

  • 由 1200 多台主机组成,包括数据中心中的 Azure 虚拟机和裸机主机

  • 存储超过 300 TB 的数据,并在 50 多个数据库集群中每秒处理 550 万次查询

  • 每个集群都配置为具有主副设置的高可用性

  • 分区存储数据 —— 利用水平和垂直分片来扩展 MySQL 集群,以及使用 MySQL 集群来存储特定产品领域的数据。此外还为大结构域 (large-domain) 提供了水平分片的 Vitess 集群,这些区域的增长超出了单主 MySQL 集群的规模

  • 庞大的工具生态,包括 Percona Toolkit、gh-ost、orchestrator、freno 和用于操作主机集群的内部自动化工具

由于需要操作两个版本的 MySQL,因此 GitHub 内部使用的工具和自动化设施需要能够兼容处理混合版本,并了解 5.7 和 8.0 之间新的、不同的或已弃用的语法。

为了满足可用性标准,GitHub 团队采取了逐步升级策略,满足在整个过程中进行 checkpoint 和回滚的需求。下面是他们制定的升级计划:

  • 步骤 1:升级滚动副本 (rolling replica)

图片

  • 步骤 2:升级备份拓扑 (replication topology)

图片

  • 步骤 3:将 MySQL 8.0 主机提升为主集群

图片

  • 步骤 4:升级面向内部的实例类型

  • 步骤 5:清理,确认集群不需要回滚并成功升级到 MySQL 8.0 后,删除 5.7 服务器。验证工作会至少经历一个完整的 24 小时流量周期,以确保在高峰流量期间不会出现问题。

至于为什么要升级到 MySQL 8.0,GitHub 团队表示主要是因为 MySQL 5.7 的生命周期即将结束。此外升级后可以获得最新安全补丁、错误修复和性能增强的 MySQL 版本。他们还希望测试 8.0 中的新功能并从中受益,包括即时 DDL、隐形索引和压缩的 bin 日志等。

详细的技术细节查看:https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/

Ubuntu 20.04 + Docker Compose 部署 Matomo 实战指南 Web分析平台是现代数字业务的核心基础设施,其本质是基于HTTP日志与JavaScript埋点的数据采集、存储与可视化系统。Matomo作为开源替代方案,依托PHP应用层、MySQL关系型存储、Redis会话缓存及Nginx反向代理构成典型LAMP演进架构。该技术栈的价值在于兼顾数据主权合规性与实时分析能力,支持私有化部署、GDPR就绪及原始日志导出(如Parquet格式),广泛应用于电商、SaaS和教育类中大型网站的用户行为分析场景。本文聚焦Ubuntu 20.04 LTS环境下,通过Docker Com 阅读详情

相关推荐

Ubuntu 16.04 搭建 Moodle 3.5–3.9 实战指南:Apache+MySQL+PHP 兼容配置全解析

Moodle 是一款广泛应用于教育机构的开源学习管理系统,其稳定运行依赖于 Web 服务器、数据库与 PHP 环境的精准协同。理解 Apache 的模块加载机制、MySQL 的 SQL 模式与字符集策略、PHP 扩展依赖及运行参数调优,是保障 Moodle 部署成功的基础技术能力。尤其在老旧硬件或国产化终端等受限环境中,Ubuntu 16.04 与 Moodle 3.5–3.9 的组合仍具强适配性——它不追求最新特性,而强调生产级确定性。本文聚焦 apache 安装与配置、mysql安装教程 等高频实操场景

weixin_34185320的博客 285

Prometheus 2.0 升级实战:Ubuntu 16.04 下安全迁移与双写验证

Prometheus 作为主流开源监控系统,其时间序列数据库(TSDB)架构演进直接影响稳定性与扩展性。Prometheus 2.0 重构了底层存储引擎,弃用 LevelDB,引入 WAL + 分块(block)+ Chunk 压缩的新型 TSDB,显著提升查询效率与资源利用率,但带来与 1.x 数据格式完全不兼容的根本性断层。这一升级不仅是版本迭代,更是监控体系代际跃迁的关键工程——尤其在 Ubuntu 16.04 等老旧生产环境中,需直面内核限制、systemd 兼容性、权限模型变更及二进制部署等现实约

294

CentOS 8 LEMP 部署实战:模块流、SELinux 与 MariaDB 替代方案

LEMP(Linux + Nginx + MySQL + PHP)是 Web 服务的基础技术栈,其核心在于组件协同与系统级兼容性。在 CentOS 8 中,传统 YUM 安装失效,根源在于模块流(Stream)机制取代了静态包管理——PHP、Nginx、数据库等不再以单一包存在,而是按版本与功能剖分为可选模块流,需显式启用 profile 才能加载 mysqli、opcache 等关键扩展。这一设计提升了安全与稳定性,但也导致常见错误如 'php -m 无 mysqli' 或 'Nginx 502 Bad

dianchaozong3657的博客 399

GitHub.com 用了 17 个月,如何将 1200 台 MySQL 主机无缝升级到 8.0 版本?

摘要:GitHub 使用 MySQL 存储大量关系型数据。近日,GitHub 工程团队在官方博客上发布了一篇长文,详细地分享了其如何将生产团队无缝升级到 MySQL 8.0 的故事,值得一读。原文地址:https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/作者 | Jiaqi Liu、Daniel Rogart、Xin W...

优快云资讯 1万+

开发者AI实战课:8小时从模型加载到可压测API服务

在AI工程落地中,'能跑通'不等于'可交付'——真正决定项目成败的是模型推理的稳定性、服务化后的可观测性,以及面对GPU显存暴涨、CUDA版本冲突、eBPF级瓶颈等真实故障的归因能力。本文聚焦面向后端工程师的AI系统构建全链路:基于llama.cpp与vLLM的量化模型加载与tensor parallelism调优、LoRA微调中的梯度精度陷阱、FastAPI封装时的prefill/decode异步解耦,以及用Locust+eBPF实现带GPU内存监控的闭环压测。内容深度覆盖开发者日常高频痛点,如CUDA_

weixin_33709219的博客 329

Emlog6.0资源模板源码深度解析与部署实战

Emlog作为轻量级PHP开源CMS,其6.0版本在中小站点建站中仍具独特价值。本文围绕‘Emlog6.0’核心架构,解析其模板机制、自动采集原理与自助广告系统的技术实现逻辑;重点阐明PHP 7.4–8.0兼容性要求、MySQL全文索引优化及模板-插件强耦合特性;揭示内容聚合型CMS在资源站、技术博客等场景中的工程适用边界;结合真实部署故障(如500错误、采集失败、广告不显示),提供从环境校验、数据库初始化到Redis缓存加固的全链路实操方案,助力开发者规避常见坑点,提升建站稳定性与可维护性。

weixin_28077113的博客 294

1200 多台 MySQL 主机,是如何无缝升级到8.0的?

你好,我是坚持分享干货的 EarlGrey,翻译出版过《Python编程无师自通》、《Python并行计算手册》等技术书籍。如果我的分享对你有帮助,请关注我,一起向上进击。创作不易,希望大家给一点鼓励,把公众号设置为“星标”,给文章点个“赞”和“在看”,谢谢大家啦~来源:OSC开源社区GitHub 团队近日分享了他们将 GitHub.com 的底层数据库无缝升级到 MySQL 8.0 的经验。据介...

codingpy的博客 131

轻量级PHP图片管理系统:ZIP一键部署+MySQL原生管理

图片管理系统是企业数字资产管理的基础能力,其核心在于低成本、低门槛、高可用的文件存储与检索方案。基于PHP原生开发、MySQL关系型数据库和ZIP标准化交付,这类系统绕过复杂框架依赖,以极简架构实现上传、分类、搜索、删除等核心功能。技术原理聚焦于LAMP栈基础组件协同——PHP处理HTTP请求与文件操作,MySQL支撑结构化元数据管理,GD库生成缩略图,而ZIP包封装了可移植的完整运行环境。其技术价值体现在部署零配置、维护可视化、资源占用低,特别适用于内网办公、中小团队及老旧服务器场景。本文围绕一个真实落地

weixin_33858485的博客 445

[Upgrading GitHub.com to MySQL 8.0] GitHub 升级 MySQL 8

GitHub使用MySQL来存储大量的关系数据。这是我们如何无缝升级我们的生产集群到MySQL 8.0的故事。, and15年前,GitHub作为一个Ruby on Rails应用程序开始,只有一个MySQL数据库。从那时起,GitHub已经发展了其MySQL架构,以满足平台的扩展和弹性需求,包括构建高可用性,实现测试自动化和分区数据。今天,MySQL仍然是GitHub基础设施的核心部分,也是我们选择的关系数据库。这是我们如何将1200多台MySQL主机升级到8.0的故事。

howeres的博客 255

国内优秀MES开源框架

一套springboot 开源框架 代码标准规范化。 界面展示 演示地址 http://wangziyangmes.pzzd.xyz 用户名admin 密码123 系统管理 工艺管理 计划管理 物料管理 *用户管理* *工艺路线管理* 工单下达...

q707231019的博客 2万+

COMSOL解的继承

COMSOL解的继承1. 应用场景2. 实现方法2.1. 添加研究步骤2.2. 引用研究 根据参考文献整理而来,原文见: http://blog.sina.com.cn/s/blog_4a0a8b5d010126w5.html https://www.zhihu.com/question/371867999/answer/1309194094 个人学习笔记,如有疏漏,欢迎补充 1. 应用场景 在COMSOL模拟中,一次求解之后往往遇到以下几种情况需要用到解的继承: 1)瞬态求解的继续运算。例如初始设定求解1

jessica0307的博客 2万+

PHP与MySQL交互原理与安全实践指南

数据库连接是Web开发的核心技术之一,PHP通过客户端-服务器模型与MySQL进行交互。这种交互依赖于MySQL协议和特定的扩展库(如mysql/mysqli),涉及连接管理、查询执行和结果处理等关键环节。在安全方面,SQL注入防护和权限控制尤为重要,现代开发推荐使用预处理语句(如mysqli或PDO)替代传统的mysql_*函数。对于高并发场景,连接池管理和查询优化能显著提升性能。这些技术在电商系统、内容管理系统等需要频繁数据库操作的应用中具有重要价值,特别是在处理用户认证、订单管理等关键业务时。

weixin_34321753的博客 444

硬件测试入门--环路响应(Bode)测试

环路分析的一个重要作用就是分析开关电源的稳定性。扫频测试原理主要是给开关电源电路注入一个频率变化的正弦信号,测量开关电源在频域上的特性,通过分析穿越频率、增益裕度和相位裕度来判断环路是否稳定,可以为电子工程师设计稳定的控制电路提供直观的数据。开关电源的稳定性关系到整个应用系统的可靠性,利用伯德图可以看出在不同频率下系统增益的大小和相位。通过伯德图来对开关电源的环路稳定性进行判断和分析已经成为评估开关电源可靠性必不可少的方法。

songninging的博客 1万+

OpenClaw虾壳云版2.6.4 Windows一键部署实战指南

OpenClaw是一款面向自动化技能编排的开源智能体框架,其核心依赖于Python运行时、轻量级数据库与YOLO视觉模型的协同调度。本文聚焦Windows桌面环境下的开箱即用部署范式,解析如何绕过Docker兼容性陷阱与WSL2配置难题,通过嵌入式Python、免安装MySQL及预量化模型实现零依赖交付。技术价值体现在环境固化、端口预设与服务自愈三大设计,显著降低非技术人员的运维门槛。典型应用场景包括客服对话机器人、运营自动化脚本、小团队本地AI工作流等对数据隐私敏感但缺乏DevOps能力的轻量级生产需求。

weixin_33843409的博客 404

DRAM内存模拟持久化设备的方法

由于持久化内存介质NVM技术的发展,越来越多的科研工作者投身到NVM相关的研究当中。但由于目前工业界并没有推出广泛使用的NVM介质设备,所以科研工作都需要自己以现有的条件,模拟NVM设备使用场景。一个简单的方法是:通过修改DRAM模拟器,达到模拟NVM的目的(可以参考:DRAMSim2模拟器分析与应用)。更高端的方式是:在真实系统中,将内存划分出一块儿,用来模拟NVM设备(类似于传统的ramdis

酷炫人笨笨熊 1899

立创EDA开源足轮机器人:基于STM32F407与ESP32的LQR自平衡与FOC驱动设计全解析

本文详细解析了基于立创EDA平台的开源足轮机器人项目。该项目采用STM32F407作为主控,ESP32负责无线通信,并应用LQR自平衡算法与FOC驱动技术,实现了机器人的稳定站立、移动转向及复杂地形适应能力。文章深入剖析了其硬件架构、软件设计及调试经验,为机器人运动控制学习提供了宝贵参考。

weixin_42608299的博客 234

用Docker快速部署Snipe-IT:一份从零开始的IT资产管理系统完整指南

想象一下这个场景:周五下午,老板突然问"咱们公司现在有多少台笔记本还在保修期内?去年采购的那批显示器到底分给谁了?"如果你还在翻 Excel 表、挨个问同事,那这篇文章就是为你准备的。Snipe-IT 是一款免费开源的 IT 资产与许可证管理系统,专门解决"设备去哪了、谁在用、什么时候该维护"这三件事,而本文将带你用 Docker 在 30 分钟内把它跑起来。 ## 第一章·初见:Snipe-I

gitblog_00209的博客 698

PCL 提取两片点云的非重叠部分【2025最新版】

PCL 提取两片点云的非重叠部分。博客长期更新,本文最近一次更新时间为:2025年9月1日。

点云侠的博客 36万+

Ubuntu 18.04 部署 Ampache 音乐流媒体服务实战指南

音乐流媒体服务是数字馆藏与家庭媒体中心的核心基础设施,其本质是基于 Web 的音频元数据索引与 HTTP 流式分发系统。原理上依赖 LAMP 栈协同:Apache 处理路由与静态资源、PHP 执行业务逻辑、MySQL 存储 ID3 标签等结构化元数据。技术价值在于低资源占用与高并发 I/O 效率,特别适合老旧服务器或嵌入式场景。典型应用场景包括社区图书馆数字资源平台、NAS 音乐库共享、教育机构本地化媒体服务等。本文聚焦 Ubuntu 18.04 环境下 Ampache 4.4.2 的全链路部署,涵盖 ap

weixin_30315723的博客 389

界面材料知识

界面材料(TIM)用于芯片和散热器之间的导热作用,将低导热系数的空气(空气的导热系数(0.026 W /M·K))排除,换成高导热系数,低热阻导热系数的材料。具体的:TIM1为芯片DIE和芯片保护壳之间的界面材料,一般是直接焊接的方式,比如使用铟片,有很高的导热系数;芯片厂工程师主要找的是TIM1界面材料。TIM1.5为芯片Die和散热器之间的界面材料,比较少见;TIM2为我们所常见的界面材料,用于芯片外壳和散热器之间。(图片来源网上)

YY_Share的博客 1854

OpenClaw 2026 路线图详解:3 大协作能力升级与社区贡献增长 62% 的实证分析

介绍 OpenClaw 2026 如何通过上下文锚定(Context Anchoring)、协作质量定义和责任边界机制,将 AI 编程工具从单点补全升级为嵌入代码生命周期的协作对齐系统,并详解 `.openclaw/config.yaml` 中 `context_anchor` 配置的实操方法与效果

weixin_42545292的博客 385

Spring Boot 3.4.13 + JDK 17 迁移实战:从架构重置到生产就绪

Spring Boot 和 JDK 是 Java 企业级应用的核心运行时基础。Spring Boot 3.x 强制要求 JDK 17+,标志着从传统 Servlet 容器、Parallel GC 到 Jakarta EE 9 命名空间、ZGC 与模块化 JVM 的代际升级。其本质不仅是版本更新,更是字节码规范(Class File Format 61)、API 契约(javax → jakarta)和内存模型的全面对齐。技术价值体现在低延迟(ZGC P99 <10ms)、强安全(TLS 1.3 原生支持)与

weixin_30653023的博客 430

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

AI编程工具避坑指南:从上下文吞吐到符号解析的实战选型

AI编程工具并非简单的代码补全助手,其核心能力由上下文吞吐效率与符号解析深度共同定义。理解token/s实际处理能力、AST构建质量及语义绑定层级,是判断工具能否支撑Java/Spring、Rust/WASM或Python全栈开发的关键。技术价值在于降低认知负荷、加速调试闭环与保障类型安全;典型场景包括IDEA中Dubbo链式补全优化、VS Code Server远程开发延迟治理、WSL2下Trae IDE微服务通信修复。本文基于6个千万级生产项目实测,聚焦Copilot上下文截断、Codeium本地模型版

608

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

Hermes大模型网关:Rust+Docker构建的生产级AI中间件

大模型网关是连接LLM、工具、用户与业务系统的AI中间件,核心在于协议转换、智能路由与状态协调。其技术原理涵盖高并发调度(如tokio协程)、容器化交付(Docker镜像契约)与四层解耦架构(接入层/调度层/工具层/模型层),显著提升AI服务的稳定性、安全性和可维护性。相比Python轻量框架,Rust实现的零成本抽象与内存安全带来更高QPS与更低P99延迟,而Docker封装则保障跨平台一致性与升级原子性。典型应用场景包括Telegram机器人自动化、多平台消息路由、RAG增强对话及Cron驱动的数字员工

weixin_33739523的博客 464

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

doctl深度解析:DigitalOcean云平台CLI工具设计与工程实践

命令行接口(CLI)是基础设施即代码(IaC)落地的关键入口,其本质是将云服务API进行语义化封装,实现可编程、可复现的资源管理。doctl作为DigitalOcean官方CLI,不仅提供对API v2的完整覆盖,更通过动词-名词命令树、运行时元数据拉取、多级参数校验与安全凭证管理等机制,显著降低开发者认知负荷。它支撑从单机部署、CI/CD集成到跨区域灾备等典型云原生场景,是DevOps流水线中稳定可靠的自动化齿轮。本文聚焦doctl的核心设计逻辑与生产级实战经验。

weixin_34268843的博客 320
上一篇: 机圈骂战再开:小米“炮轰”余承东,一加红米高管“激情开麦”
下一篇: try-catch 能把你问懵!
IT界那些事儿
博客等级 码龄6年 2万+粉丝 22原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值