mongodb 参数优化
1.大部分IO操作为随机IO,建议采用SSD或PCIE,普通硬盘RAID10
2.IO调度算法。普通磁盘:deadline避免IO请求出现“饥饿”现象,SSD/PCIE:noop简单的先进先出处理请求。
echo "noop" > /sys/block/sdxxxx/queue/scheduler #SSD
echo "deadline" > /sys/block/sdxxxx/queue/scheduler #普通盘
并添加至 /etc/rc.local
cat /sys/block/sdxxxx/queue/scheduler #查看
3.文件系统选择XFS
4.磁盘挂载
vim /etc/fstab
/dev/vdc /data1 xfs defaults,noatime,nodiratime 1 2
5.内存优化
关闭大叶内存 echo "never" > /sys/kernel/mm/transparent_hugepage/enabled
echo "never" > /sys/kernel/mm/transparent_hugepage/defrag
numal设置 echo 0 > /proc/sys/vm/zone_reclaim_mode
并添加到/etc/rc.local
mongodb节点启动 sudo -u mongo numactl --interleave=all mongod -f mongo.cnf
6.NTP时间同步
7.进程数限制
vim /etc/security/limits.conf
* soft nofile 65535
* hard nofile 65535
* soft nproc 65535
* hard nproc 65535
* soft stack 1024
* hard stack 1024
vim /etc/security/limits.d/90-nproc.conf
* soft nproc 65535
8. mongo性能参数
journal日志和data分开,journal不支持直接指定目录,可以创建软链接解决。
wiredTigerCacheSizeGB=x 尽可能覆盖所有热数据
storage.dirctoryPerDB=true 数据文件单独存储
wiredTigerDirectoryForIndexes=true 索引文件单独存储
wiredTigerCollectionBlockCompressor=snappy 集合压缩存储模式 zlib压缩最高
journal=true
安全参数
nohttpinterface=true (<3.6版本)
bind_ip_all_true (>=3.6) 配置节点访问范围
keyFile=/dbPath/keyFile 指定集群间认证模式
openssl rand -base64 66 -out keyFile
chmod 600 keyFile && chown mongo.mongo keyFile
setParameter=enableLocalhostAuthBypass=1 启用本地认证
maxConns=65536 控制最大连接数
参数配置模板
fork =true #后台运行
port =7777
quiet =true # 方便排查问题
dbpath = /data1/xxxx
logpath=/data1/xxxx
logappend =true
journal=true
nohttpinterface=true #3.6后已经废弃
directoryperdb=true
wiredTigerDirectoryForIndexes=true
bind_ip_all =true
maxConns=65536
profile=1 # 日志记录级别
slowms=500 #慢查询记录时间(毫秒)
replset=rs #备份集
oplogSize=40960 #oplog大小
keyFile=/data1/xxxx/keyFile
setParameter=enableLocalhostAuthBypass=1
storageEngine=wiredTiger
wiredTigerCacheSizeGB=1
wiredTigerCollectionBlockCompressor=snappy
#shardsvr=true #配置节点角色 (>=3.4 shard节点专用)
#configsvr=true #指定config节点角色 (>=3.4 config节点专用)
#configdb=mschost #指定config配置信息 (mongos 节点专用)
mongodb 参数优化的更多相关文章
- WiredTiger运行时参数优化
MongoDB的WiredTiger存储引擎,用了一段时间,遇到了一些问题,通过优化WT参数,也解决了一些问题,做个小结. cache_size 指定WT存储引擎内部cache的内存用量上限. 需要注 ...
- linux下TCP/IP及内核参数优化调优(转)
Linux下TCP/IP及内核参数优化有多种方式,参数配置得当可以大大提高系统的性能,也可以根据特定场景进行专门的优化,如TIME_WAIT过高,DDOS攻击等等. 如下配置是写在sysctl.con ...
- Windows下tcp参数优化
Windows系统下的TCP参数优化2013-04-25 0 个评论 作者:最初的幸福ever收藏 我要投稿Windows系统下的TCP参数优化 TCP连接的状态与关闭方 ...
- paper 62:高斯混合模型(GMM)参数优化及实现
高斯混合模型(GMM)参数优化及实现 (< xmlnamespace prefix ="st1" ns ="urn:schemas-microsoft-com:of ...
- MySQL配置文件my.cnf参数优化和中文详解
Mysql参数优化对于新手来讲,是比较难懂的东西,其实这个参数优化,是个很复杂的东西,对于不同的网站,及其在线量,访问量,帖子数量,网络情况,以及机器硬件配置都有关系,优化不可能一次性完成,需要不断的 ...
- MongoDB 性能优化五个简单步骤
MongoDB 一直是最流行的 NoSQL,而根据 DB-Engines Ranking 最新的排行,时下 MongoDB 已经击败 PostgreSQL 跃居数据库总排行的第四位,仅次于 Oracl ...
- 内核参数优化/etc/sysctl.conf
net.nf_conntrack_max = 65536000net.netfilter.nf_conntrack_tcp_timeout_established = 1200net.ipv4.tcp ...
- Limit参数优化MySQL查询的方法
在做一些查询时,总希望能避免数据库引擎做全表扫描,因为全表扫描时间长,而且其中大部分扫描对客户端而言是没有意义的.那么,在mysql中有那些方式是可以避免全表扫面?除了通过使用索引列或分区等方式来进行 ...
- MySQL参数优化
目前针对MySQL数据库进行了一些参数优化,具体如下: my.ini / my.cnf 参数说明 #使用查询缓存 query_cache_size=100M # ...
随机推荐
- zookeep服务启动命令
zookeeper的安装目录:/usr/local/zookeeper-3.4.6/bin/zkServer.sh; 配置文件路径:../conf/zoo.cfg 端口 :2181: ZooKeepe ...
- torch.utils.data.DataLoader对象中的迭代操作
关于迭代器等概念参考:https://www.cnblogs.com/zf-blog/p/10613533.html 关于pytorch中的DataLoader类参考:https://blog.csd ...
- 易度文档管理系统--http://www.everydo.com/
易度文档管理系统--http://www.everydo.com/ 公司工程技术部门需要,暂收藏.
- 题解-CodeChef IOPC14L Sweets Problem
Problem CodeChef-IOPC14L 题目概要:给定 \(n\) 种糖果且给定每种糖果的数量 \(A_i\),\(Q\) 组询问,每次问选出 \(S\) 个糖果的方案数(模\(10^9+7 ...
- Mac 安装JRE 1.8
最近使用React Native,运行android版本时,需要jre 1.8,但是用oracle 的安装文件安装完毕后,在控制台java -version输出的还是 1.7版本.发现是环境变量没配对 ...
- maven无法下依赖jar文件的解决方案
问题描述: Plugin org.apache.maven.plugins:maven-clean-plugin:2.5 or one of its dependencies could not be ...
- 著名的3像素Bug(div+img,多出几像素)
<div><img src="...."></div> 给img的css设置display: block;/*用来去除div下边莫名多出来的3p ...
- CentOS7 nginx启动脚本
vi /lib/systemd/system/nginx.service [Unit] Description=nginx After=network.target [Service] Type=fo ...
- sklearn模型的属性与功能-【老鱼学sklearn】
本节主要讲述模型中的各种属性及其含义. 例如上个博文中,我们有用线性回归模型来拟合房价. # 创建线性回归模型 model = LinearRegression() # 训练模型 model.fit( ...
- 一起学爬虫——使用xpath库爬取猫眼电影国内票房榜
之前分享了一篇使用requests库爬取豆瓣电影250的文章,今天继续分享使用xpath爬取猫眼电影热播口碑榜 XPATH语法 XPATH(XML Path Language)是一门用于从XML文件中 ...