mysql 数据库DBA课程12_02 NoSQL-Mongodb复制集

MongoDB复制集RS(ReplicationSet)******
至少3个节点,早期版本有主从,从2.x 的版本,开始加入了 RS
最基础的架构:1 主两从


架构演变:


6.1 基本原理
基本构成是1主2从的结构,自带互相监控投票机制(Raft(MongoDB) Paxos(mysql MGR 用的是变种))
如果发生主库宕机,复制集内部会进行投票选举,选择一个新的主库替代原有主库对外提供服务。同时复制集会自动通知客户端程序,主库已经发生切换了。应用就会连接到新的主库。

6.2 Replication Set配置过程详解

6.2.1 规划
三个以上的mongodb节点(或多实例)

6.2.2 环境准备
多个端口:
28017、28018、28019、28020
多套目录:
su - mongod
mkdir -p /mongodb/28017/conf /mongodb/28017/data /mongodb/28017/log
mkdir -p /mongodb/28018/conf /mongodb/28018/data /mongodb/28018/log
mkdir -p /mongodb/28019/conf /mongodb/28019/data /mongodb/28019/log
mkdir -p /mongodb/28020/conf /mongodb/28020/data /mongodb/28020/log


多套配置文件
/mongodb/28017/conf/mongod.conf
/mongodb/28018/conf/mongod.conf
/mongodb/28019/conf/mongod.conf
/mongodb/28020/conf/mongod.conf

配置文件内容:
cat > /mongodb/28017/conf/mongod.conf <<EOF
systemLog:
destination: file
path: /mongodb/28017/log/mongodb.log
logAppend: true
storage:
journal:
enabled: true
dbPath: /mongodb/28017/data
directoryPerDB: true
#engine: wiredTiger##(默认的引擎,和innodb类似,具备事务的功能。)
 wiredTiger: 
 engineConfig:
 cacheSizeGB: 1 ##缓冲区大小,相当于innodb的buffter pool功能

directoryForIndexes: true
collectionConfig:
blockCompressor: zlib
indexConfig:
prefixCompression: true
processManagement:
fork: true
net:
bindIp: 192.168.68.190,127.0.0.1
port: 28017
replication:
 oplogSizeMB: 2048
 replSetName: my_repl ##复制集名称,可以任意。
EOF

##mongodb把日志存在表中,表的大小有限制,如果不设置,就是总的磁盘空间的是5%


\cp /mongodb/28017/conf/mongod.conf /mongodb/28018/conf/
\cp /mongodb/28017/conf/mongod.conf /mongodb/28019/conf/
\cp /mongodb/28017/conf/mongod.conf /mongodb/28020/conf/

sed 's#28017#28018#g' /mongodb/28018/conf/mongod.conf -i
sed 's#28017#28019#g' /mongodb/28019/conf/mongod.conf -i
sed 's#28017#28020#g' /mongodb/28020/conf/mongod.conf -i


启动多个实例备用:
mongod -f /mongodb/28017/conf/mongod.conf
mongod -f /mongodb/28018/conf/mongod.conf
mongod -f /mongodb/28019/conf/mongod.conf
mongod -f /mongodb/28020/conf/mongod.conf

netstat -lnp|grep 280


6.3 配置普通复制集:

1主2从,从库普通从库
mongo --port 28017 admin ##登录这个节点,一般就是主节点
config = {_id: 'my_repl', members: [
{_id: 0, host: '192.168.68.190:28017'},
{_id: 1, host: '192.168.68.190:28018'},
{_id: 2, host: '192.168.68.190:28019'}]
}

rs.initiate(config)


查询复制集状态 rs.status();

6.4 1主1从1个arbiter 架构搭建,与前面方法一样。
mongo -port 28017 admin
config = {_id: 'my_repl', members: [
{_id: 0, host: '192.168.68.190:28017'},
{_id: 1, host: '192.168.68.190:28018'},
{_id: 2, host: '192.168.68.190:28019',"arbiterOnly":true}]
}

rs.initiate(config)
一个节点无法在两个复制集存在的,mongodb的复制集不支持级联的复制,没有多主的功能。




6.5 复制集管理操作
6.5.1 查看复制集状态

rs.status(); //查看整体复制集状态
rs.isMaster(); // 查看当前是否是主节点
rs.conf(); //查看复制集配置信息

6.5.2 添加删除节点(将上面的,一主两从,架构改为,一主一从,一个arbiter[只参与投票,不做其他])

把一个从节点,变成arbiter ,有两种方法,1,重新搭建,2,先在集群中删除这个节点,再添加为arbiter
必须是登录在主节点上操作:
rs.remove("ip:port"); // 删除一个节点


rs.addArb("ip:port"); // 新增仲裁节点(arbiter)




rs.add("ip:port"); // 新增从节点
my_repl:PRIMARY> rs.add("192.168.68.190:28020")

my_repl:PRIMARY> rs.isMaster()



6.5.3 特殊从节点

介绍:
arbiter节点:主要负责选主过程中的投票,但是不存储任何数据,也不提供任何服务

hidden节点:隐藏节点,不参与选主,也不对外提供服务。
delay节点:延时节点,数据落后于主库一段时间,因为数据是延时的,也不应该提供服务或参与选主,所以通常会配合hidden(隐藏)
一般情况下会将delay+hidden一起配置使用

配置延时节点(一般延时节点也配置成hidden)
将 "192.168.68.190:28020" 设置成 hidden、delay 节点

mongo --port 28017 admin ##本地登录到主库
++++++++++++++++++++++++++++++++++++
rs.conf() ##找到这个"192.168.68.190:28020" 的id号




cfg=rs.conf()
cfg.members[3].priority=0
cfg.members[3].hidden=true
cfg.members[3].slaveDelay=120 ##单位:秒
rs.reconfig(cfg)


取消以上配置
cfg=rs.conf()
cfg.members[3].priority=1
cfg.members[3].hidden=false
cfg.members[3].slaveDelay=0
rs.reconfig(cfg)
配置成功后,通过以下命令查询配置后的属性
rs.conf();



注意:members[3]----->这里的节点ID,不一定是真实的ID,当你在原有架构中有删除节点时,其他节点的ID不会变,这时 再做 cfg.members[3].priority=0 就会报错,此时需要结合你的配置文件来看,id编号从多少开始的(比如,从0开始),再来数现有几个节点,你要修改的那个节点排在第几(x),members[x] ,这样才对。

mongodb默认,从库,是不让读,也不让写。






6.5.4 副本集(从库)其他操作命令
查看副本集的配置信息
admin> rs.conf()
查看副本集各成员的状态
admin> rs.status()
++++++++++++++++++++++++++++++++++++++++++++++++

--副本集角色切换(不要人为随便操作)
admin> rs.stepDown()
注:
admin> rs.freeze(300) //锁定从,使其不会转变成主库

freeze()和stepDown单位都是秒。
+++++++++++++++++++++++++++++++++++++++++++++

查看副本节点(监控主从延时)
admin> rs.printSlaveReplicationInfo()
source: 192.168.1.22:27017
syncedTo: Thu May 26 2016 10:28:56 GMT+0800 (CST)
0 secs (0 hrs) behind the primary