MongoShake-优快云博客

本文链接：https://blog.youkuaiyun.com/hezuijiudexiaobai/article/details/148949755

目录标题

MongoShake 是一个 MongoDB 数据迁移与同步工具，并非客户端连接工具，它的用途与 mongosh、Compass 这些交互式客户端不同。

下面是对 MongoShake 的详细说明，帮助你明确它的定位、用途、版本兼容性与应用场景：

🔄 什么是 MongoShake？

MongoShake 是 阿里云开源的 MongoDB 数据同步工具，主要用于：

实时同步 MongoDB 数据（增量+全量）
异构集群复制（如 Sharded ➜ ReplicaSet）
迁移上云（如同步到 MongoDB Atlas）
灾备环境构建（主 ➜ 从备份）

🔧 核心功能

功能模块	说明
全量同步	初始同步数据，类似 `mongodump + mongorestore`，但支持高效并发
增量同步	监听 oplog 实现实时同步（类似于 MongoDB 的副本机制）
同步过滤	支持指定集合、数据库、字段的过滤同步
同步限速	可配置 QPS、TPS 限流
容灾能力	支持断点续传、重试机制
目标数据库支持	支持 ReplicaSet、Sharded、MongoDB Atlas、甚至 ElasticSearch（旧版）

✅ MongoDB 6.0 支持情况

✅ MongoShake 对 MongoDB 6.0 是兼容的，但要注意版本选型与配置参数调整

🏗️ 典型架构图

Source MongoDB (5.x/6.0)
    │
    ├──> [MongoShake Extractor]  ---> 捕捉 oplog
    │
    ├──> [MongoShake Collector]  ---> 格式转换/过滤
    │
    └──> [MongoShake Sender]     ---> 写入目标 MongoDB（或 ElasticSearch）

在这里插入图片描述

🚀 典型应用场景

场景	说明
同步主机与灾备集群	在两个 DC 部署 MongoDB 集群，实现异地多活或灾备
MongoDB 升级迁移	将老集群数据同步至新集群，测试新版本可行性后切流
实时数据镜像（副本）	为数据分析、BI 做数据镜像（如同步到另一集群或 ES）
跨集群/跨版本迁移	Sharded ➜ ReplicaSet，或者不同 MongoDB 版本之间迁移

⚠️ 注意事项

权限要求：
- 源端 MongoDB 需开启 Oplog（副本集模式）
- 需要 read、readWrite、clusterMonitor 等权限
部署方式：
- 二进制部署即可，无需额外安装依赖
- 支持配置文件和命令行参数
不等同于 mongosh：
- mongosh 是用于交互式访问 MongoDB 的客户端 Shell
- MongoShake 是异步运行的同步程序，用于数据复制，不支持命令行交互

🧩 总结对比

工具	类型	功能
`mongosh`	客户端 Shell	连接 MongoDB 进行交互式查询、管理操作
`Compass`	GUI 工具	可视化浏览文档、运行聚合、管理索引等
MongoShake	同步工具	实时同步数据、构建灾备集群、数据迁移、异构写入等