一、问题引出

假设我们生产上的mongodb是单实例在跑,如果此时发生网络发生问题或服务器上的硬盘发生了损坏,那么这个时候我们的mongodb就使用不了。此时我们就需要我们的mongodb实现高可用,当一个mongod实例出现问题后,其余的mongod实例可以继续提供服务,即自动故障转移。mongodb的复制集(replica set)就可以实现我们的这个需求。

二、什么是复制集

mongodb的复制集指的是一组拥有相同实例的mongod实例所组成的集群。其中有一台服务器充当主节点(Primary Node),主节点可以实现数据的写入和读取操作。其余的节点可以充当备份节点(Secondary Node),备份节点用于保存主节点的数据备份,如果主节点挂了,那么Secondary Node会被选举中Primary Node。在mongodb 中还存在一种仲裁节点(Arbiter Node),仲裁节点只是用于进行投票选举Primary Node,不进行数据的存储。

三、复制集小知识点

1、在复制集中,主节点(primary Node)是唯一的,但是它是不固定的,当主节点宕机后,会重新选举出新的主节点。

2、仲裁节点(Arbiter Node)无法进行存储数据,只是用于充当选举的

3、当复制集中的节点 <= 1/2 时集群只可以读,不可进行写入。

4、对于同一个复制集而言,其配置参数 replSet 的值必须是一样的。

5、数据目录必须要先存在,否则会报错。

6、在window 上使用 --config 指定启动mongod的配置文件路径,liunx上使用 -f

7、复制集的初始化必须要在admin集合上进行操作。

8、仲裁节点只可以存在一个。

9、从节点默认不可查询数据,需要 执行  rs.slaveOk(true) 命令后,才可以查询出数据。

10、如果复制集中有某一台机器的性能明显比别的机器好,那么我们希望该节点成为主节点的概率大一些,此时我们就需要设置 priority(0-1000) 属性的值大一些,该值是复制集的参数选项,见下方表格中复制集的初始化。(注意:如果a节点的priority值最大,此时它宕机了,主节点被b节点获取到了,过一段时间a节点恢复了,那么a节点就会再次获取到主节点,b节点变成从节点。)

11、隐藏节点: priority=0 && hidden=true 该节点拥有和主节点一样的数据,但是不可以被客户端程序发现,使用rs.isMaster()方法无法查询到此节点,rs.status() 可以看到此节点。

12、延时节点: priority=0 && hidden=true && slaveDelay=3600 表示和主节点的数据延时3600秒,即该节点的数据和主节点的数据会存在一个小时的延时。

13、如果要对复制集的某个节点进行维护,那么可以先将这个节点关闭,然后注释掉这个节点中的配置文件中的replSet属性,以单节点的方式启动,维护好后,关闭节点,恢复这个属性,然后再以复制集进行启动。

四、复制集节点数量

在mongodb的复制集中,如果要一个复制集是可用的,那么存活的节点数必须要 > 1/2 的总节点数,即当有一个4个节点的复制集和3个节点的复制集,当复制集不可用时,都是有2个节点挂掉,此时存活的节点会降级成从节点。所以我们复制集一般使用奇数个几点,假设我们没有那么多的机器,那么我们可以添加一个仲裁节点。

大多数原则:当集群中的存活的节点数量小于集群总数的 1/2时,集群不可用。

大多数原则举例:假设我们有2个机房,上海机房和北京机房,总共署了7个节点,其中上海机房有4个mongod节点,北京机房有3个mongod节点,主节点在上海机房此时北京机房的网络发生问题无法连接到上海的机房,如果没有大多数原则,那么北京机房将发生master选举,此时就会存在mongodb集群中就会存在2个主节点。如果存在大多数原则,因为总节点是7个,北京机房只有3个节点,3个节点小于总节点的1/2,因此不会发生master选举。

五、创建一个复制集(此处创建一个主节点,2个备份节点的复制集)

机器(host) mongodb端口(port) 配置文件(etc)
192.168.244.1  28001 D:\Program Files\MongoDB\rs\rs-study\etc\28001.conf
192.168.244.1 28002 D:\Program Files\MongoDB\rs\rs-study\etc\28002.conf
192.168.244.1 28003 D:\Program Files\MongoDB\rs\rs-study\etc\28003.conf

  ** 配置文件的内容

28001.conf

#mongodb端口

port=28001

#绑定ip,只有这个ip才可以访问上mongodb
bind_ip=192.168.244.1

# 日志文件的路径
logpath=D:\Program Files\MongoDB\rs\rs-study\log\28001.log

# 数据文件的目录
dbpath=D:\Program Files\MongoDB\rs\rs-study\data\28001

#日志以追加的方式存在
logappend=true

# mongodb进程的pid的值将存入此文件
pidfilepath=D:\Program Files\MongoDB\rs\rs-study\data\28001.pid
# fork=true linux以后台方式启动,在window上没有用
# 此参数较大比较好,单位是 MB,默认是磁盘可用空间的 5%
oplogSize=1024
# 复制集的名称,同一个复制集的名称必须要相同
replSet=rs-study

28002.conf

port=28002
bind_ip=192.168.244.1
logpath=D:\Program Files\MongoDB\rs\rs-study\log\28002.log
dbpath=D:\Program Files\MongoDB\rs\rs-study\data\28002\
logappend=true
pidfilepath=D:\Program Files\MongoDB\rs\rs-study\data\28002.pid
oplogSize=1024
replSet=rs-study

28003.conf port=28003
bind_ip=192.168.244.1
logpath=D:\Program Files\MongoDB\rs\rs-study\log\28003.log
dbpath=D:\Program Files\MongoDB\rs\rs-study\data\28003\
logappend=true
pidfilepath=D:\Program Files\MongoDB\rs\rs-study\data\28003.pid
oplogSize=1024
replSet=rs-study

 注意:

         1、三个配置文件的 replSet 的值必须是一致的。         2、dbpath这个目录必须要先存在。

         3、oplogSize的值但是是MB,这个值最好大一些,这个值决定了主节点上local数据库中oplog这个固定集合的大小,从节点从这个固定集合中实现数据的复制。

          4、oplog的默认大小:(对于windows和unix系统,默认是系统磁盘可用的5%,不同的引擎存在不同的上下限)

  ** 启动mongodb

28001 mongod --config "D:\Program Files\MongoDB\rs\rs-study\etc\28001.conf"
28002 mongod --config "D:\Program Files\MongoDB\rs\rs-study\etc\28002.conf"
28003 mongod --config "D:\Program Files\MongoDB\rs\rs-study\etc\28003.conf"

  ** 连上28001,执行复制集的初始化

连上: mongo 192.168.244.1:28001
初始化: use admin

rs.initiate({
    _id : "rs-study",
    members : [
        {_id : 0,host : "192.168.244.1:28001","priority":10},
        {_id : 1,host : "192.168.244.1:28002"},
        {_id : 2,host : "192.168.244.1:28003"}
    ]
});

注意:

1、在连上mongod时,必须要指定 192.168.244.1,因为这个参数是在mongodb的配置文件2800*.conf中的bind_ip指定的。

2、复制集的初始化必须要先使用 use admin,即必须要在admin集合上进行操作。

3、最外层 _id 的值为复制集中 replSet 的值,里面members中的 _id 的值不可重复。

4、priority(0-1000)属性的默认值为1,此值越大越有可能成为主节点。

 ** 初始化副本集

六、复制集的基本操作方法

方法 作用

描述

rs.initiate({}) 初始化复制集

1、use admin

2、执行此方法

rs.reconfig() 重新初始化复制集

1、进入到主节点

2、只有该节点可能成为主节点的节点上才可以进行此方法

3、执行此方法会有一瞬间会断开连接,如果此时主库有写操作会有问题

rs.isMaster() 返回副本集的配置和状态子集  
rs.status() 查看副本集的状态  
rs.config() 查看副本集的配置  
rs.stepDown(秒1,秒2) 将主节点变成从节点  
rs.add({}) 添加复制集成员

1、rs.add("host:port")

2、rs.add({"host":"",....})

3、rs.add("host:port",true) 添加仲裁节点

rs.addArb("host:port") 添加仲裁成员  
rs.remove("host:port") 删除复制集成员

1、建议先将需要删除的复制集成员关闭,然后再删除。

2、该命令会短暂的断开并强制重连

rs.slaveOk(true) 允许复制集上的该成员读取数据  

window系统上实现mongodb副本集的搭建的更多相关文章

  1. MongoDB副本集的搭建

    副本集是mongodb提供的一种高可用解决方案.相对于原来的主从复制,副本集能自动感知primary节点的下线,并提升其中一个Secondary作为Primary. 整个过程对业务透明,同时也大大降低 ...

  2. linux上安装MongoDB副本集(带keyfile安全认证以及用户权限)

    搭建前准备 MongoDB版本:4.0 主要参考搭建MongoDB副本集网站:https://www.jianshu.com/p/f021f1f3c60b 安装之前最好先确定一下几点: 防火墙关闭 M ...

  3. [ MongoDB ] 副本集的搭建及测试

    Replica Sets  复制 (副本集) node1: 10.0.0.10node2: 10.0.0.11node3: 10.0.0.12 副本集结构图:

  4. mongodb副本集群搭建

    一.环境介绍 1.机器信息 10.40.6.68 10.40.6.108 10.40.6.110 软件环境为centos 6.x 2.mongodb 下载链接地址 https://www.mongod ...

  5. MongoDB副本集的常用操作及原理

    本文是对MongoDB副本集常用操作的一个汇总,同时也穿插着介绍了操作背后的原理及注意点. 结合之前的文章:MongoDB副本集的搭建,大家可以在较短的时间内熟悉MongoDB的搭建和管理. 下面的操 ...

  6. MongoDB 副本集的常用操作及原理

    本文是对MongoDB副本集常用操作的一个汇总,同时也穿插着介绍了操作背后的原理及注意点. 结合之前的文章:MongoDB副本集的搭建,大家可以在较短的时间内熟悉MongoDB的搭建和管理. 下面的操 ...

  7. Docker下搭建mongodb副本集

    背景 有需求需要对mongodb做一个容灾备份.根据官网,发现mongodb最新版本(4.0)已经抛弃了主从模式而采用副本集进行容灾.副本集的优势在于:"有自动故障转移和恢复特性,其任意节点 ...

  8. 我们的一个已投产项目的高可用数据库实战 - mongo 副本集的搭建具体过程

    我们的 mongo 副本集有三台 mongo 服务器:一台主库两台从库. 主库进行写操作,两台从库进行读操作(至于某次读操作到底路由给了哪台,仲裁决定).实现了读写分离.这还不止,假设主库宕掉,还能实 ...

  9. 在centos7上搭建mongodb副本集

    1.安装副本集介绍 副本集(Replica Set)是一组MongoDB实例组成的集群,由一个主(Primary)服务器和多个备份(Secondary)服务器构成.通过Replication,将数据的 ...

随机推荐

  1. 如何在线安全清理mysql慢日志

    部门mysql数据库的服务器磁盘空间快满了,查看了下磁盘的慢日志,发现占了50多个g,百度了资料后删除成功,现在和大家分享下我清理的过程,或许有更好的办法. 1.首先连接进入mysql,查看慢日志的状 ...

  2. vue-cli 项目中使用 v-chart 及导出 chart 图片

    安装: npm i v-charts echarts -S 组件中使用: 1 <template> 2 <div class="app-chart"> 3 ...

  3. 一文彻底搞懂Hive的数据存储与压缩

    目录 行存储与列存储 行存储的特点 列存储的特点 常见的数据格式 TextFile SequenceFile RCfile ORCfile 格式 数据访问 Parquet 测试 准备测试数据 存储空间 ...

  4. PHP中的日期相关函数(一)

    日期相关的操作函数是我们在日常的工作开发中最常接触到的功能.当然,大部分同学可能最多用到的就是 date() . time() 这两个函数,我们今天先不讲这两个函数,或许后面的文章也不太会讲它们,毕竟 ...

  5. discuz连接微博登陆,第三方登录

    首先记一下discuz的ucenter的架构: ucenter 是用户中心.其他的应用都是和ucenter连接,包括discuz也是ucenter的一个应用(默认的); 第一步: 在ucenter新建 ...

  6. 华为云计算IE面试笔记-华为云计算解决方案业务迁移支持哪些迁移?有哪些特点?请描述基本的业务交付流程、业务迁移流程和原则。

    1. 迁移场景:华为云计算解决方案按照源端环境来说,支持P2V.V2V(P2V:物理设备(操作系统及其上的应用软件和数据)迁移到华为虚拟化平台.V2V:其他厂商的虚拟化平台迁移到华为虚拟化平台.)以及 ...

  7. CF803G-Periodic RMQ Problem【离散化,线段树,ST表】

    正题 题目链接:https://www.luogu.com.cn/problem/CF803G 题目大意 一个长度为\(n\)的序列\(a\)复制\(k\)份连接,要求支持 区间赋值 区间查询最小值 ...

  8. 华为云计算IE面试笔记-其它知识点

    * 虚拟化与云计算的区别?云计算和虚拟化关系?华为云计算怎么做的? 虚拟化是一种具体的技术,实现的是对硬件资源的虚拟化,提升资源利用率,降低能耗,云计算是一种概念各种技术组件的集合,针对的是对各种资源 ...

  9. hexo配合github action 自动构建(多种形式)

    已经使用HEXO正常构建GitHub页面 根据github action 给hexo配置自动部署github page 前往墨抒颖的个人网站查看纯净版 1. 为仓库设置访问密钥 第一步先生成密钥,打开 ...

  10. java SE(未完结)

    数据类型与运算符 数据类型 基础数据类型 数值型 正整型 byte short int long 结尾加(l/L) 浮点型 float 结尾加(f/F) double 字符型 char 只能存储一个字 ...