mongodb分片集群
第一章
1.mongodb 分片集群解释和目的
一组Mongodb复制集,就是一组mongod进程,这些进程维护同一个数据集合。复制集提供了数据冗余和高等级的可靠性,这是生产部署的基础。
第二章
1.实验环境
centos7 3台服务器
192.168.1.195 2G内存
192.168.1.196 2G内存
192.168.1.197 2G内存
2.初始化环境(三台都操作)
yum -y install ntp
systemctl enable ntpd
systemctl start ntpd
ntpdate -u cn.pool.ntp.org
hwclock --systohc
timedatectl set-timezone Asia/Shanghai
# 关闭防火墙 Selinux
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
sed -i '/SELINUX/s/enforcing/disabled/' /etc/selinux/config
3.系统文件数设置
cat >> /etc/security/limits.conf <<EOF
* soft nofile 102400
* hard nofile 409600
* soft nproc 2048
* hard nproc 4096
EOF
echo never >> /sys/kernel/mm/transparent_hugepage/enabled
echo never >> /sys/kernel/mm/transparent_hugepage/defrag
第三章(三台都需要操作)
1.下载mongodb包
wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-3.6.5.tgz
2.创建mongodb用户
useradd -M -u 8000 -s /sbin/nologin mongo
3.下载文件解压缩
mkdir /data/ 然后解压MongoDB二进制包到/data目录下,并改名为mongo
3-1.配置mongo启动变量
vi /etc/profile
export MONGODB_HOME=/data/mongodb
export PATH=$MONGODB_HOME/bin:$PATH
source /etc/profile
4.配置环境
mkdir -p /data/mongo/config
mkdir -p /data/mongo/data/server
mkdir -p /data/mongo/log/server
mkdir -p /data/mongo/log/mongos
for i in {1..3};do mkdir -p /data/mongo/data/shard$i; done
for i in {1..3};do mkdir -p /data/mongo/log/shard$i; done
5.configsvr配置文件
#不同机器更改bind_ip
cat >> /data/mongo/config/config.conf << EOF
bind_ip=192.168.1.195
dbpath=/data/mongo/data/server
pidfilepath=/data/mongo/mongo.pid
logpath=/data/mongo/log/server/mongodb.log
logappend=true
journal = true
port=
fork=true
configsvr=true
logRotate=rename
#副本集名字
replSet=damowang
#最大连接数
maxConns=
EOF
6.权限更改
chown -R mongo:mongo /data/mongo
7.启动configsvr
/data/mongo/bin/mongod -f config/config.conf
8.初始化configsvr (单台机器操作)
#登录其中任意一台机器
/data/mongo/bin/mongo --host 192.168.10.203 --port 27000 config = {_id : "damowang", members : [{_id : 0, host : "192.168.1.195:27000"}, {_id : 1, host : "192.168.1.196:27000"}, {_id : 2, host : "192.168.1.197:27000"}]} #初始化副本集
rs.initiate(config)
第四章 (三台机器都操作)
1.配置shard
cat >> /data/mongo/config/shard1.conf << EOF #不同机器bind_ip改变
bind_ip=192.168.1.195
#更改为对应shard
dbpath=/data/mongo/data/shard1
pidfilepath=/data/mongo/shard1.pid
logpath=/data/mongo/log/shard1/mongodb.log
logappend=true
journal = true
#更改为对应shard端口
port=
fork=true
logRotate=rename
shardsvr=true
#副本集名称
replSet=shard1
#最大连接数
maxConns=
EOF
2.权限更改
chown -R mongo:mongo /data/mongo
3.启动shardsvr
/data/mongo/bin/mongod -f config/shard1.conf
4.初始化shardsvr
#登录其中任意一台机器
/data/mongo/bin/mongo --host 192.168.1.195 --port 27001
config = {_id : "shard1", members : [{_id : 0, host : "192.168.1.195:27001"}, {_id : 1, host : "192.168.1.196:27001"}, {_id : 2, host : "192.168.1.197:27001", arbiterOnly: true}]}
rs.initiate(config)
第五章
1.mongos 配置文件初始化
cat >> /data/mongo/config/mongos.conf << EOF
#不同机器更改bind_ip
bind_ip=192.168.1.195
pidfilepath=/data/mongo/mongos.pid
logpath=/data/mongo/log/mongos/mongos.log
logappend=true
logRotate=rename
#mongos监听端口
port=
fork=true
#damowang 为 configsvr 的副本集名称
configdb=damowang/192.168.1.195:,192.168.1.196:,192.168.1.197:
#最大连接数
maxConns=
EOF
2.权限更改
chown -R mongo:mongo /data/mongo
3.启动mongos
/data/mongo/bin/mongos -f config/mongos.conf
4.启用mongos
#登录其中任意一台机器
bin/mongo --host 192.168.1.195 --port 28000 #进入客户端,切换用户
use admin #添加分片
sh.addShard("shard1/192.168.1.195:27001,192.168.1.196:27001,192.168.1.197:27001")
sh.addShard("shard1/192.168.1.195:27002,192.168.1.196:27002,192.168.1.197:27002")
sh.addShard("shard1/192.168.1.195:27003,192.168.1.196:27003,192.168.1.197:27003")
#查看集群状态
sh.status()
第六章
1.配置shard分片
#登录任意mongos
bin/mongo --host 192.168.10.203 --port 28000 #切换admin用户
use admin #对指定库 test1 开启分片
sh.enableSharding("test1") # 对test库下的 person collection 开启hash模式分片
sh.shardCollection( "test1.person", { "_id": "hashed" } ) # 查看分片状态
sh.status() #如果分片原有数据,必先建索引,再指定分片键
sh.enableSharding("new2")
use new2
db.user2.createIndex( { "username": 1 } )
sh.shardCollection( "new2.user2", { "username": 1 } )
mongodb分片集群的更多相关文章
- MongoDB分片集群原理、搭建及测试详解
随着技术的发展,目前数据库系统对于海量数据的存储和高效访问海量数据要求越来越高,MongoDB分片机制就是为了解决海量数据的存储和高效海量数据访问而生. MongoDB分片集群由mongos路由进程( ...
- TiDB和MongoDB分片集群架构比较
此文已由作者温正湖授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. 最近阅读了TiDB源码的说明文档,跟MongoDB的分片集群做了下简单对比. 首先展示TiDB的整体架构 M ...
- 搭建MongoDB分片集群
在部门服务器搭建MongoDB分片集群,记录整个操作过程,朋友们也可以参考. 计划如下: 用5台机器搭建,IP分别为:192.168.58.5.192.168.58.6.192.168.58.8.19 ...
- 网易云MongoDB分片集群(Sharding)服务已上线
此文已由作者温正湖授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. MongoDB sharding cluster(分片集群)是MongoDB提供的数据在线水平扩展方案,包括 ...
- MongoDB 分片集群实战
背景 在如今的互联网环境下,海量数据已随处可见并且还在不断增长,对于如何存储处理海量数据,比较常见的方法有两种: 垂直扩展:通过增加单台服务器的配置,例如使用更强悍的 CPU.更大的内存.更大容量的磁 ...
- CentOS7+Docker+MangoDB下部署简单的MongoDB分片集群
简单的在Docker上快速部署MongoDB分片集群 前言 文中使用的环境如下 OS:CentOS Linux release 7.5.1804 (Core) Docker:Docker versio ...
- Windows 搭建MongoDB分片集群(二)
在本篇博客中我们主要讲描述分片集群的搭建过程.配置分片集群主要有两个步骤,第一启动所有需要的mongod和mongos进程.第二步就是启动一个mongos与集群通信.下面我们一步步来描述集群的搭建过程 ...
- Windows 搭建MongoDB分片集群(一)
一.角色说明 要构建一个MongoDB分片集群,需要三个角色: shard server 即存储实际数据得分片,每个shard 可以是一个Mongod实例,也可以是一组mongod实例构成得Repl ...
- 分布式文档存储数据库之MongoDB分片集群
前文我们聊到了mongodb的副本集以及配置副本集,回顾请参考https://www.cnblogs.com/qiuhom-1874/p/13953598.html:今天我们来聊下mongodb的分片 ...
随机推荐
- ETL技巧应用(高级应用介绍:准备区运用、 时间戳的运用、日志表的运用、使用调度)
1.1 准备区运用 a.在构建数据仓库时,数据源位于一服务器上,数据仓库在另一服务器端,数据源Server端访问频繁,并且数据量大,需要不断更新, b.建立准备区数据库: >将数据抽取到准 ...
- Spring Boot 集成 thymeleaf 模版引擎
Spring Boot 建议使用 HTML 来完成动态页面.Spring Boot 提供了大量的模版引擎,包括 Thymeleaf.FreeMarker.Velocity等. Spring Boot ...
- csv文件的读取
.csv Introduction CSV是一种常以逗号或者制表符分割的文件格式. 利用Excel创建一个csv文件 用记事本打开,实际上是这样子的: 读取csv文件 直接用open()打开 with ...
- 【Alpha go】Day 3!
[Alpha go]Day 3! Part 0 · 简要目录 Part 1 · 项目燃尽图 Part 2 · 项目进展 Part 3 · 站立式会议照片 Part 4 · Scrum 摘要 Part ...
- 微信小程序点击 navigator ,页面不跳转
1.navigator 对应的 url 必须配置在app.json的pages中: 2.navigator 对应的 url 不能配置在"tabBar"的"list&quo ...
- vue2.0学习笔记之路由(二)路由嵌套+动画
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- BZOJ 1834 网络扩容 最大流+最小费用流
题目链接: https://www.lydsy.com/JudgeOnline/problem.php?id=1834 题目大意: 给定一张有向图,每条边都有一个容量C和一个扩容费用W.这里扩容费用是 ...
- Spark项目之电商用户行为分析大数据平台之(九)表的设计
一.概述 数据设计,往往包含两个环节: 第一个:就是我们的上游数据,就是数据调研环节看到的项目基于的基础数据,是否要针对其开发一些Hive ETL,对数据进行进一步的处理和转换,从而让我们能够更加方便 ...
- 十分钟教你使用NoteExpress
http://www.a-site.cn/article/761794.html 如果你正走在读研的路上,不管是什么专业,日常生活中都少不了读文献.读文献和读文献. 与其等到文献堆积如山,给阅读和使用 ...
- rabbitmq安装错误集
1.安装依赖yum -y install make gcc gcc-c++ kernel-devel m4 ncurses-devel openssl-devel unixODBC unixODBC- ...