TiDB 海量 region 集群调优实践

作者介绍： 田维繁，网易游戏资深数据库工程师，TUG 华南区 Co-Leader。数据库老兵，维护过多种数据库，目前在网易游戏负责数据库私有云平台的运维和开发。

在 TUG 网易线上企业行活动中，来自网易游戏的资深数据库工程师田维繁老师分享了 TiDB 海量 region 集群调优主题，以下内容整理自当天活动分享实录。 此次分享的主题包括三个方面：

• 第一部分是关于网易游戏以及网易游戏目前使用 TiDB 现状；

• 第二部分是 tombstone key 案例分享，包括整个排查过程介绍；

• 第三部分是使用 TiDB 5.0 的初体验以及未来展望。

关于我们

我们是面向整个网易游戏，提供一站式数据库私有云服务的部门，提供包括 MongoDB、MySQL、Redis、TiDB 等数据库服务。网易游戏 99% 以上的游戏业务都在使用我们提供的数据库私有云服务。

TiDB 在网易游戏的使用情况如下：整个 TiDB 的集群数量在 50+，TiDB 环境的整体数据规模在 200TB+，最大的集群节点数 25+，包括大部分的 TiKV 以及小部分的 TiFlash 节点，单集群的最大数据量在 25TB+。尽管目前 TiDB 属于初步使用阶段，但是也已经达到了一定规模，整个业务使用过程中我们也碰到了诸多问题。

本次分享我挑选了一个比较有意思的案例，分享我们排查的整个过程，也非常期望大家能从中得到一定的参考借鉴。

tombstone key 引发的“血案”

我们分享的案例是 tomstone key 引发的“血案”，可能有的小伙伴们会问 tomstone key 是什么？后面会详细的介绍 tomstone key 的含义。

**为什么叫“血案”呢？**是因为一想到血案，大家会觉得这个问题确实比较严重。

这个问题当时影响了网易某大型游戏的实时和离线业务分析场景，导致整个分析业务不可用，进而影响了内部数据报表系统的可用性。另外，由于持续时间还较长，游戏的产品运营以及公司的高层也无法及时地看到游戏数据。

背景

在分