Ghostferry：高效、灵活的MySQL数据迁移工具

Ghostferry：高效、灵活的MySQL数据迁移工具

ghostferry The swiss army knife of live data migrations 项目地址: https://gitcode.com/gh_mirrors/gh/ghostferry

项目介绍

Ghostferry 是一个开源的库，旨在帮助用户将数据从一台MySQL实例选择性地复制到另一台实例，同时最大限度地减少停机时间。该项目受到GitHub的gh-ost启发，但Ghostferry不仅限于同一数据库内的数据复制，而是支持从一个数据库复制到另一个数据库，并且可以选择性地复制部分数据。

Ghostferry 提供了一个名为 ghostferry-copydb 的示例应用程序（位于 copydb 目录下），该应用程序展示了如何使用Ghostferry库将整个数据库从一个机器复制到另一个机器。

项目技术分析

Ghostferry 的高级设计通过 TLA+ 规范 进行了详细描述，位于 tlaplus 目录下。虽然规范可能不完全正确，因为证明仍然难以捉摸，但它提供了一个简洁的定义。

在技术层面，Ghostferry 被分解为多个组件，这些组件共同协作以实现数据复制。详细的技术概述可以在 Ghostferry 文档 中找到。

项目及技术应用场景

Ghostferry 适用于以下场景：

• 数据库迁移：在不影响业务的情况下，将数据从一个MySQL实例迁移到另一个实例。
• 数据备份与恢复：选择性地复制部分数据，用于备份或恢复操作。
• 数据分片：在分片环境中，将数据从一个分片迁移到另一个分片。

项目特点

• 最小化停机时间：Ghostferry 通过高效的数据复制机制，最大限度地减少了数据迁移过程中的停机时间。
• 选择性复制：支持选择性地复制部分数据，灵活性高。
• 易于集成：提供了示例应用程序 ghostferry-copydb，方便用户快速上手。
• 强大的调试支持：通过 DEBUG=1 选项，用户可以实时查看详细的调试输出，便于排查问题。

如何开始

安装

内部贡献者

dev up

外部贡献者

1. 安装 Docker。
2. 克隆仓库。
3. 运行以下命令：

docker-compose up -d
nix-shell

测试

运行所有测试

make test

运行示例 copydb 使用

make copydb && ghostferry-copydb -verbose examples/copydb/conf.json

更多详细教程，请参阅 Ghostferry 文档。

Ghostferry 是一个强大且灵活的工具，适用于各种数据迁移场景。无论您是数据库管理员、开发人员还是数据工程师，Ghostferry 都能帮助您高效、安全地完成数据迁移任务。立即尝试 Ghostferry，体验其带来的便利与高效！

ghostferry The swiss army knife of live data migrations 项目地址: https://gitcode.com/gh_mirrors/gh/ghostferry