mongodb replica set

本文介绍MongoDB复制集(Replica Set)的管理方法,包括如何进行故障转移、添加及删除节点,并详细阐述了通过快照加Oplog的方式保持数据一致性。

之前主要介绍了RS(replica set)的安装配置,这里再介绍一下日常的管理,比如添加以及删除节点。

故障转移,这个无疑是RS的重要特性:

<wbr style="line-height:25px"></wbr>


在之前建立好的replica set,直接kill掉进程,剩下的节点就会选举出一个节点作为主节点。

添加删除节点:

删除节点:rs.remove()即可

例如:rs.remove("localhost:20004")

添加节点:mkdir -p /mongo/data4

echo "this is a key for RS">/mongo/key/k4

touch /mongo/mongo_rs_log/rs4.log

建立好相关目录以及文件

mongod --replSet myrs/localhost:20004 --keyFile /mongo/key/k4 --fork --port 20004 --dbpath /mongo/data4/ --logpath=/mongo/mongo_rs_log/rs4.log //启动第四个节点

rs.add({_id:3,host:"localhost:20004"})

通过rs.status()查看状态。

以上是通过oplog来添加节点

其实这里有一个缺点,oplog是copped collections,所以他会循环写,根据lru覆盖数据,所以可能造成和主库数据的不一致,这里mongodb提供了快照加oplog方式,以保持新加节点的一致性,列出具体步骤:

1.一个复制集成员的物理文件来初始化数据,也就是直接copy一个dbpath,建立相应的Key文件,以及日志文件。

[mongo@172_16_3_216 mongo]$ mkdir data5
[mongo@172_16_3_216 mongo]$ cp data1/* data5/

[mongo@172_16_3_216 mongo_rs_log]$ touch rs5.log

[mongo@172_16_3_216key]$cp k1 k5

2.插入验证数据

myrs:PRIMARY> db.bank.insert({computer:"mac"})

3.启动新节点

mongod --replSet myrs/localhost:20005 --keyFile /mongo/key/k5 --fork --port 20005 --dbpath /mongo/data5/ --logpath=/mongo/mongo_rs_log/RS5.log--fastsync

4.添加节点

myrs:PRIMARY> rs.add("localhost:20005")

5.验证数据登录该节点

rs.status()
{
"set" : "myrs",
"date" : ISODate("2011-11-16T09:50:29Z"),
"myState" : 1,
"members" : [
{
"_id" : 0,
"name" : "localhost:20001",
"health" : 1,
"state" : 1,
"stateStr" : "PRIMARY",
"optime" : {
"t" : 1321436824000,
"i" : 1
},
"optimeDate" : ISODate("2011-11-16T09:47:04Z"),
"self" : true
},
{
"_id" : 1,
"name" : "localhost:20002",
"health" : 1,
"state" : 2,
"stateStr" : "SECONDARY",
"uptime" : 203,
"optime" : {
"t" : 1321436824000,
"i" : 1
},
"optimeDate" : ISODate("2011-11-16T09:47:04Z"),
"lastHeartbeat" : ISODate("2011-11-16T09:50:28Z")
},
{
"_id" : 2,
"name" : "localhost:20003",
"health" : 1,
"state" : 2,
"stateStr" : "SECONDARY",
"uptime" : 203,
"optime" : {
"t" : 1321436824000,
"i" : 1
},
"optimeDate" : ISODate("2011-11-16T09:47:04Z"),
"lastHeartbeat" : ISODate("2011-11-16T09:50:28Z")
},
{
"_id" : 3,
"name" : "localhost:20005",
"health" : 1,
"state" : 2,
"stateStr" : "SECONDARY",
"uptime" : 185,
"optime" : {
"t" : 1321436824000,
"i" : 1
},
"optimeDate" : ISODate("2011-11-16T09:47:04Z"),
"lastHeartbeat" : ISODate("2011-11-16T09:50:28Z")
}
],
"ok" : 1
}

mongo 127.0.0.1:20005
MongoDB shell version: 1.8.4
connecting to: 127.0.0.1:20005/test
myrs:SECONDARY> show collections
Wed Nov 16 17:51:01 uncaught exception: error: { "$err" : "not master and slaveok=false", "code" : 13435 }
myrs:SECONDARY> db.getMongo().setSlaveOk()
not master and slaveok=false
myrs:SECONDARY> db.bank.find()
{ "_id" : 0, "name" : "joe", "age" : "50", "score" : 99 }
{ "_id" : 1, "name" : "joe", "age" : "60", "score" : 99 }
{ "_id" : 2, "name" : "joe", "age" : "70", "score" : 99 }
{ "_id" : ObjectId("4ec3849baa5bff10ca03145b"), "computer" : "mac" }

可以看到数据已经同步过来。


注:如果启动新节点或者kill -9杀掉进程重启的时候,有以下报错:

Wed Nov 16 17:45:06 [initandlisten] MongoDB starting :pid=15397port=20005 dbpath=/mongo/data5/ 64-bit
Wed Nov 16 17:45:06 [initandlisten] db version v1.8.4, pdfile version 4.5
Wed Nov 16 17:45:06 [initandlisten] git version: 81f12749a15e3d158b1b16bab6bc3faea538e166
Wed Nov 16 17:45:06 [initandlisten] build sys info: Linux bs-linux64.10gen.cc 2.6.21.7-2.ec2.v1.2.fc8xen #1 SMP Fri Nov 20 17:48:28 EST 2009 x86_64 BOOST_LIB
_VERSION=1_41
**************
old lock file: /mongo/data5/mongod.lock. probably means unclean shutdown
recommend removing file and running --repair
see:http://dochub.mongodb.org/core/repairfor more information
*************
Wed Nov 16 17:45:06 [initandlisten] exception in initAndListen std::exception: old lock file, terminating
Wed Nov 16 17:45:06 dbexit:
Wed Nov 16 17:45:06 [initandlisten] shutdown: going to close listening sockets...
Wed Nov 16 17:45:06 [initandlisten] shutdown: going to flush diaglog...
Wed Nov 16 17:45:06 [initandlisten] shutdown: going to close sockets...
Wed Nov 16 17:45:06 [initandlisten] shutdown: waiting for fs preallocator...
Wed Nov 16 17:45:06 [initandlisten] shutdown: closing all files...
Wed Nov 16 17:45:06 closeAllFiles() finished
Wed Nov 16 17:45:06 dbexit: really exiting now

这是由于启动新进程的时候去读取这个文件,这个文件其实就是一个进程号,以上红色标注的pid,那么就把数据目录下的mongod.lock删除掉即可,启动的时候会自动重建一个文件,重新分配一个pid。

### MongoDB Replica Set 的配置与使用指南 #### 1. 基本概念 MongoDB Replica Set 是一组 `mongod` 进程,它们维护相同的数据库集。这种架构提供数据冗余并增加了数据的可用性[^1]。 #### 2. 配置流程 以下是基于 CentOS 和 MongoDB 版本为 3.x 的 Replica Set 配置过程: ##### 修改配置文件 编辑 `/etc/mongod.conf` 文件,添加或修改以下参数: ```yaml replication: oplogSizeMB: 1000 replSetName: rs_name # 所有的副本集名称必须一致 ``` 注意:此步骤需在所有参与节点上完成[^3]。 ##### 启动 MongoDB 实例 在每一台机器上启动 MongoDB 并指定副本集名称: ```bash ./mongod --port 27017 --dbpath /data/db/ --logpath /data/log/m.log --logappend --fork --replSet rs_name ``` 如果需要自定义端口或其他路径,则可以调整命令中的选项[^2]。 ##### 初始化副本集 在一个预期作为 Primary 节点的实例中运行以下命令初始化副本集: ```javascript mongo > rs.initiate() > rs.conf() ``` 随后可以通过 `rs.add()` 方法向副本集中添加其他成员: ```javascript > rs.add("host2") > rs.add("host3") ``` 其中 `"host2"` 和 `"host3"` 应替换为目标主机的实际 IP 地址或域名[^4]。 对于仲裁者(Arbiter),可单独启动一个轻量级的服务而不存储任何实际数据: ```bash ./mongod --port 27018 --dbpath /data/mongoTestArbiter --logpath /data/mongoTestArbiter/log --logappend --fork --replSet rs_name ``` 并通过如下方式将其加入到副本集中: ```javascript > rs.addArb("arbiter_host") ``` #### 3. 故障排查 - **问题**: 如果多个节点均调用了 `rs.initiate()` 函数。 - **解决方案**: 关闭所有 MongoDB 服务,清除各节点上的 DBPath 数据目录后再重新启动服务[^3]^。 - **问题**: 添加 Secondary 成员失败,网络连接异常。 - **解决方案**: 检查防火墙设置以及确认 `/etc/hosts` 中已正确定义了相关主机名映射关系[^5]^。 #### 4. 性能优化建议 为了提升读写性能,可以在应用程序层面启用读偏好功能,允许客户端优先从 Secondary 节点获取查询结果。例如,在驱动程序中设定读偏好的模式为 nearest 或 secondaryPreferred 等策略[^1]^。 --- ### 示例代码片段 以下是一个简单的 Python 客户端脚本用于测试 Replica Set 是否正常工作: ```python from pymongo import MongoClient, ReadPreference client = MongoClient([ 'host1:27017', 'host2:27017', 'host3:27017' ], replicaset='rs_name') # 使用 read preference 来分担负载 collection = client['test_db']['test_collection'] cursor = collection.find({}).with_options(read_preference=ReadPreference.SECONDARY_PREFERRED) for doc in cursor: print(doc) ``` ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值