一、关于 MongoDB复制集
1、什么是复制集
复制集是额外的数据副本,是跨多个服务器同步数据的过程,复制集提供了冗余并增加了数据可用性,通过复制集可以对硬件故障和中断的服务进行恢复。
复制集的优势如下:
让数据更安全
搞数据可用性(7 * 24)
灾难恢复
无停机维护(如备份、索引重建、故障转移)
读缩放(额外的副本读取)
副本集对应用程序是透明的
2、复制集的工作原理
MongoDB的复制集至少需要两个节点。其中一个是主节点(primary),负责处理客户端的请求,其余的都是从节点(Secondary),负责复制主节点上的数据。
MongoDB各个节点常见的搭配方式为:一主一从或一主多从。主节点记录其上的所有操作到oplog中,从节点定期轮询主节点获取这些操作,然后对自己的数据副本执行这些操作,从而保证从节点的数据与主节点一致。
主从复制结构图如下:
复制集特点如下:
N个节点的集群
任何节点可作为主节点
所有写入操作都在主节点上
自动故障转移
自动恢复
二、MongoDB复制集部署
1、配置yum源vi /etc/yum.repos.d/CentOS-Base.repo //末行增加
[mongodb-org]
name=MongoDB Repository
baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/3.6/x86_64/
gpgcheck=1
enabled=1
gpgkey=https://www.mongodb.org/static/pgp/server-3.6.asc
2、安装配置mongodb
yum install -y mongodb-org //安装
vi /etc/mongod.conf //修改监听地址和端口
打开复制模块
3、创建多实列
mkdir -p /data/mongodb/mongodb{2,3,4} //创建数据目录
cd /data
mkdir logs
touch logs/mongodb{2,3,4}.log //创建日志文件
cd logs/
chmod 777 *.log //赋予权限
cp -p /etc/mongod.conf /etc/mongod2.conf //复制主配置文件
cp -p /etc/mongod.conf /etc/mongod3.conf
cp -p /etc/mongod.conf /etc/mongod4.conf
vi /etc/mongod2.conf //依次修改主配置文件(注意文件的名称不一样)
mongod -f /etc/mongod.conf //进入对应的实列
mongod -f /etc/mongod2.conf
mongod -f /etc/mongod3.conf
mongod -f /etc/mongod4.conf
4、配置三个节点的复制集
mongo //进库
cfg={"_id":"kgcrs","members":[{"_id":0,"host":"192.168.80.100:27017"},{"_id":1,"host":"192.168.80.100:27018"},{"_id":2,"host":"192.168.80.100:27019"},{"_id":3,"host":"192.168.80.100:27020"}]} //将另外三个节点添加到复制集
rs.initiate(cfg) //初始化复制集配置
rs.status() //查看复制集的状态
rs.remove("192.168.80.183:27020") //删除节点
rs.add("192.168.80.183:27020") //添加节点
5、验证复制集
use test
db.a.insert({"id":1,"name":"jack"})
db.a.find()
去其他节点依次查看验证
mongo -port 27018
show dbs
三、MongoDB复制切换
1、故障自动切换
mongod -f /etc/mongo.conf --shutdown //模拟了模拟故障点
mongdo -port 27018 //进入新的主节点
rs.status() //查看复制集状态
2、手动切换
mongdo -port 27018 //进入主节点
rs.stepDown(60,30) //交出主节点位置
rs.status() //查看状态
rs.freeze(30) //暂停30s不参与选举,必须要有仲裁节点,在下面的复制选举中验证
四、MongoDB复制选举
1、虚拟机还原重复上述安装mongoDB并添加多实例
2、配置三个复制节点
mongo //进库
cfg={"_id":"kgcrs","members":[{"_id":0,"host":"192.168.80.100:27017","priority":100},{"_id":1,"host":"192.168.80.100:27018","priority":100},{"_id":2,"host":"192.168.80.100:27019","priority":0},{"_id":3,"host":"192.168.80.100:27020","arbiterOnly":true}]} //指定复制节点给的属性(priority为100:标准节点,priority为0:被动节点,arbiterOnly:仲裁节点)
rs.initiate(cfg) //初始化配置
rs.isMaster() //查看个点节点属性
use local
show collections //查看集合
db.oplog.rs.find() //查看日志记录所有操作
3、模拟便准节点故障
mongod -f /etc/mongod.conf --shutdown //模拟标准节点1故障
mongo --port 27018 //进入第二个准备节点验证是否被选举为主节点
mongod -f /etc/mongod2.conf --shutdown //模拟标准节点2故障
mongo --port 27019 //进入被动节点验证,此时被动节点不能成为主节点
4、允许从节点读取数据
在从节点无法查看数据
rs.slaveOk() //允许从节点读取数据
show dbs; //允许默认从节点读取数据
5、查看复制状态信息
rs.help() //查看
rs.printReplicationInfo() //查看复制集信息
rs.printSlaveReplicationInfo() //查看从节点的状态
注:其中没有仲裁节点,说明仲裁节点不具备数据复制能力
6、更改oplog大小
use local
db.oplog.rs.stats() //查看操作复制操作的状态
方法一:
use admin //进入管理库
db.shutdownServer() //关闭注销复制集相关启动参数
vi /etc/mongod.conf //修改端口为27028并注释复制集参数
mongod -f /etc/mongod.conf //单实例启动
mongodump --port 27028 --db local --collection 'oplog.rs' //备份操作日志
mongo --port 27028
> use local
> db.oplog.rs.drop() //删除日志文件
> db.runCommand( { create: "oplog.rs", capped: true, size: (2 * 1024 * 1024 * 1024) } ) //重新创建日志文件并且指定大小
> use admin
> db.shutdownServer() //关闭节点服务
方法二:vi /etc/mongod.conf //修改端口回27018打开复制集参数指定复制集的大小
mongod -f /etc/mongod.conf //重新启动
mongo //进入实例验证
7、放弃被选举产生新的有效选举
mongo --port 27018 //进入主节点
rs.stepDown() //放弃选举权
rs.status() //另外一个标准节点有效选举为主节点
五、部署认证复制
vi /etc/mongod.conf
vi /etc/mongod2.conf
vi /etc/mongod3.conf
vi /etc/mongod4.conf //依次打开安全认证模块
cd /usr/bin/ //进入bin目录
echo "kgcrs key"> kgcrskey1 //创建认证文件
echo "kgcrs key"> kgcrskey2
echo "kgcrs key"> kgcrskey3
echo "kgcrs key"> kgcrskey4
chmod 600 kgcrskey{1..4} //更改权限
四个实例依次进行重启
进入主节点
kgcrs:PRIMARY> show dbs #无法查看数据库
kgcrs:PRIMARY> rs.status() #无法查看复制集
kgcrs:PRIMARY> use admin #身份登录验证
kgcrs:PRIMARY> db.auth("root","123")
kgcrs:PRIMARY> rs.status() #可以查看数据库
kgcrs:PRIMARY> show dbs #可以查看复制集