Linux中mongodb定时远程备份
下载mongodb
https://www.cnblogs.com/tartis/p/5291580.html
mongodb定时备份文档
虚拟机报错要改BIOS 虚拟技术开启
进入root账户 su root 回车输入密码
一、创建MongoDB备份目录
mkdir -p /data1/mongodb_bak/mongodb_bak_now
mkdir -p /data1/mongodb_bak/mongodb_bak_list
二、新建MongoDB数据库备份脚本(/data1/mongodb_bak)
创建:touch 文件名。
如:touch mongodtask.sh
编辑:sudo gedit mongodtask.sh 复制一下脚本代码按需要修改
脚本:
#!/bin/bash
#backup MongoDB
#mongodump命令路径
DUMP=/home/test/Downloads/mongodb/bin/mongodump
#临时备份目录
OUT_DIR=/data1/mongodb_bak/mongodb_bak_now
#备份存放路径
TAR_DIR=/data1/mongodb_bak/mongodb_bak_list
#获取当前系统时间
DATE=`date +%Y_%m_%d`
#数据库账号
DB_USER=root
#数据库密码
DB_PASS=p2005
#DAYS=15代表删除15天前的备份,即只保留近15天的备份
DAYS=15
#最终保存的数据库备份文件
TAR_BAK="mongodb_bak_$DATE.tar.gz"
cd $OUT_DIR
rm -rf $OUT_DIR/*
mkdir -p $OUT_DIR/$DATE
#备份全部数据库
$DUMP -h 127.0.0.1:27017 -d test -o $OUT_DIR/$DATE
#压缩为.tar.gz格式
tar -zcvf $TAR_DIR/$TAR_BAK $OUT_DIR/$DATE
#copy to 192.168.33.129
scp $TAR_DIR/$TAR_BAK root@192.168.33.129:/data/mongodb_bak
#删除15天前的备份文件
find $TAR_DIR/ -mtime +$DAYS -delete
exit
省略了连接文件存储系统的账号和密码因为没设若需要按照下面格式:
1. $DUMP -h 127.0.0.1:27017 -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" -o $OUT_DIR/$DATE
三、修改文件属性,使其可执行(目录下执行)
给该脚本赋权限:chmod +755 mongodtask.sh
四、修改/etc/crontab,添加计划任务
1 进入编辑界面 记得要用root用户登录操作不然没有权限
1 |
crontab -e |
2 添加任务 每分钟开始执行MongoDB数据库备份脚本
1 |
* * * * * /data1/mongodb_bak/mongodtask.sh |
注意点:linux 下按A为编辑模式ctrl+z中断操作
Ctrl+c 退出编辑模式
SHIFT+Z 两次保存文件
或输入冒号然后输入wq
保存后退出,启动
1 |
service crond start |
设置开机自启动
要把cron设为在开机的时候自动启动,在 /etc/rc.d/rc.local 脚本中加入 /sbin/service crond start 即可
注意此脚本在mongodb开启时有效,否则会出错。
是否成功只需要看是否定时能在/data1/mongodb_bak 有文件生成
查看当前用户的crontab,输入 crontab -l;
编辑crontab,输入 crontab -e;
删除crontab,输入 crontab -r 慎用
五、A、B端免密登录(为了进行copy不用输入密码和安全性)
一、证书登录的过程:(了解性资料)
1.客户端生成证书的私钥和公钥。
私钥放在客户端,公钥上传到服务端(远程登陆端)。
一般为了安全,访问有黑客拷贝客户端的私钥,客户端在生成私钥时,会设置一个密码,以后每次登录ssh服务器时,客户端都要输入密码解开私钥(如果工作中,你使用了一个没有密码的私钥,有一天服务器被黑了,你是跳到黄河都洗不清)。
2.服务器添加信用公钥。
把客户端生成的公钥,上传到ssh服务器,添加到指定的文件中,这样,就完成ssh证书登录的配置了。
假设客户端想通过私钥要登录其他ssh服务器,同理,可以把公钥上传到其他ssh服务器。
二、具体操作:(生成的证书在/root/.ssh/ 目录下)
环境:A通过ssh方式登陆B,即:A为本地机,B为远程登陆server
1.A机配置
①生成公钥和私钥
ssh-keygen -t rsa (连续三次回车,即在本地生成了公钥和私钥,不设置密码)
②将公钥拷到B端
先在B端/root/目录下输入:mkdir .ssh
scp /root/.ssh/id_rsa.pub 192.168.33.129:./.ssh/id_rsa.pub
2. B机配置
输入:vi /etc/ssh/sshd_config
找到
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile .ssh/authorized_keys
修改AuthorizedKeysFile .ssh/authorized_keys2
去掉#号使其生效 需要输入下面命令重启下sshd
输入:service sshd stop
输入:service sshd start
①创建authorized_keys2文件命令如下:
touch /root/.ssh/authorized_keys2
(如果已经存在这个文件, 跳过这条)
②追加公钥到authorized_keys2中命令如下:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys2
(将id_rsa.pub的内容追加到 authorized_keys2 中)
chmod 600 ~/.ssh/authorized_keys2 赋权
A端执行shell脚本看看是否能直接备份~如果不行百度
成功后rm -f /root/.ssh/id_rsa.pub 删除 安全起见
附录:MongoDB数据库恢复
#恢复全部数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/
#恢复单个数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore -d dbname --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/dbname
部分参数说明
--drop参数:恢复数据之前删除原来的数据,避免数据重复
--noIndexRestore参数:恢复数据时不创建索引
--dir参数:数据库备份目录
-d参数:后面跟要恢复的数据库名称
或下面方法
mongodb 使用 mongorestore 命令来恢复备份的数据
1 |
>mongorestore -h <hostname><:port> -d dbname <path> |
1、--host <:port>, -h <:port>:MongoDB所在服务器地址,默认为: localhost:27017
2、--db , -d :需要恢复的数据库实例,例如:test,当然这个名称也可以和备份时候的不一样,比如test2
3、--drop:恢复的时候,先删除当前数据,然后恢复备份的数据。就是说,恢复后,备份后添加修改的数据都会被删除,慎用哦!
4、<path>:
最后的一个参数,设置备份数据所在位置,例如:c:datadumptest。
你不能同时指定 <path> 和 --dir 选项,--dir也可以设置备份目录。
5、--dir:指定备份的目录
你不能同时指定 <path> 和 --dir 选项。
mongodb定时备份文档
虚拟机报错要改BIOS 虚拟技术开启
进入root账户 su root 回车输入密码
一、创建MongoDB备份目录
mkdir -p /data1/mongodb_bak/mongodb_bak_now
mkdir -p /data1/mongodb_bak/mongodb_bak_list
二、新建MongoDB数据库备份脚本(/data1/mongodb_bak)
创建:touch 文件名。
如:touch mongodtask.sh
编辑:sudo gedit mongodtask.sh 复制一下脚本代码按需要修改
脚本:
#!/bin/bash
#backup MongoDB
#mongodump命令路径
DUMP=/home/test/Downloads/mongodb/bin/mongodump
#临时备份目录
OUT_DIR=/data1/mongodb_bak/mongodb_bak_now
#备份存放路径
TAR_DIR=/data1/mongodb_bak/mongodb_bak_list
#获取当前系统时间
DATE=`date +%Y_%m_%d`
#数据库账号
DB_USER=root
#数据库密码
DB_PASS=p2005
#DAYS=15代表删除15天前的备份,即只保留近15天的备份
DAYS=15
#最终保存的数据库备份文件
TAR_BAK="mongodb_bak_$DATE.tar.gz"
cd $OUT_DIR
rm -rf $OUT_DIR/*
mkdir -p $OUT_DIR/$DATE
#备份全部数据库
$DUMP -h 127.0.0.1:27017 -d test -o $OUT_DIR/$DATE
#压缩为.tar.gz格式
tar -zcvf $TAR_DIR/$TAR_BAK $OUT_DIR/$DATE
#copy to 192.168.33.129
scp $TAR_DIR/$TAR_BAK root@192.168.33.129:/data/mongodb_bak
#删除15天前的备份文件
find $TAR_DIR/ -mtime +$DAYS -delete
exit
省略了连接文件存储系统的账号和密码因为没设若需要按照下面格式:
1 $DUMP -h 127.0.0.1:27017 -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" -o $OUT_DIR/$DATE
三、修改文件属性,使其可执行(目录下执行)
给该脚本赋权限:chmod +755 mongodtask.sh
四、修改/etc/crontab,添加计划任务
1 进入编辑界面 记得要用root用户登录操作不然没有权限
1 |
crontab -e |
2 添加任务 每分钟开始执行MongoDB数据库备份脚本
1 |
* * * * * /data1/mongodb_bak/mongodtask.sh |
注意点:linux 下按A为编辑模式ctrl+z中断操作
Ctrl+c 退出编辑模式
SHIFT+Z 两次保存文件
或输入冒号然后输入wq
保存后退出,启动
1 |
service crond start |
设置开机自启动
要把cron设为在开机的时候自动启动,在 /etc/rc.d/rc.local 脚本中加入 /sbin/service crond start 即可
注意此脚本在mongodb开启时有效,否则会出错。
是否成功只需要看是否定时能在/data1/mongodb_bak 有文件生成
查看当前用户的crontab,输入 crontab -l;
编辑crontab,输入 crontab -e;
删除crontab,输入 crontab -r 慎用
五、A、B端免密登录(为了进行copy不用输入密码和安全性)
一、证书登录的过程:(了解性资料)
1.客户端生成证书的私钥和公钥。
私钥放在客户端,公钥上传到服务端(远程登陆端)。
一般为了安全,访问有黑客拷贝客户端的私钥,客户端在生成私钥时,会设置一个密码,以后每次登录ssh服务器时,客户端都要输入密码解开私钥(如果工作中,你使用了一个没有密码的私钥,有一天服务器被黑了,你是跳到黄河都洗不清)。
2.服务器添加信用公钥。
把客户端生成的公钥,上传到ssh服务器,添加到指定的文件中,这样,就完成ssh证书登录的配置了。
假设客户端想通过私钥要登录其他ssh服务器,同理,可以把公钥上传到其他ssh服务器。
二、具体操作:(生成的证书在/root/.ssh/ 目录下)
环境:A通过ssh方式登陆B,即:A为本地机,B为远程登陆server
1.A机配置
①生成公钥和私钥
ssh-keygen -t rsa (连续三次回车,即在本地生成了公钥和私钥,不设置密码)
②将公钥拷到B端
先在B端/root/目录下输入:mkdir .ssh
scp /root/.ssh/id_rsa.pub 192.168.33.129:./.ssh/id_rsa.pub
2. B机配置
输入:vi /etc/ssh/sshd_config
找到
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile .ssh/authorized_keys
修改AuthorizedKeysFile .ssh/authorized_keys2
去掉#号使其生效 需要输入下面命令重启下sshd
输入:service sshd stop
输入:service sshd start
①创建authorized_keys2文件命令如下:
touch /root/.ssh/authorized_keys2
(如果已经存在这个文件, 跳过这条)
②追加公钥到authorized_keys2中命令如下:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys2
(将id_rsa.pub的内容追加到 authorized_keys2 中)
chmod 600 ~/.ssh/authorized_keys2 赋权
A端执行shell脚本看看是否能直接备份~如果不行百度
成功后rm -f /root/.ssh/id_rsa.pub 删除 安全起见
附录:MongoDB数据库恢复
#恢复全部数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/
#恢复单个数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore -d dbname --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/dbname
部分参数说明
--drop参数:恢复数据之前删除原来的数据,避免数据重复
--noIndexRestore参数:恢复数据时不创建索引
--dir参数:数据库备份目录
-d参数:后面跟要恢复的数据库名称
或下面方法
mongodb 使用 mongorestore 命令来恢复备份的数据
1 |
>mongorestore -h <hostname><:port> -d dbname <path> |
如果失败:可以在目录下./mongorestore -h <hostname><:port> -d dbname <path>
1、--host <:port>, -h <:port>:MongoDB所在服务器地址,默认为: localhost:27017
2、--db , -d :需要恢复的数据库实例,例如:test,当然这个名称也可以和备份时候的不一样,比如test2
3、--drop:恢复的时候,先删除当前数据,然后恢复备份的数据。就是说,恢复后,备份后添加修改的数据都会被删除,慎用哦!
4、<path>:
最后的一个参数,设置备份数据所在位置,例如:c:datadumptest。
你不能同时指定 <path> 和 --dir 选项,--dir也可以设置备份目录。
5、--dir:指定备份的目录
你不能同时指定 <path> 和 --dir 选项。
Linux中mongodb定时远程备份的更多相关文章
- Linux中的定时自动执行功能(at,crontab)
Linux中的定时自动执行功能(at,crontab) 概念 在Linux系统中,提供了两种提前对工作进行安排的方式 at 只执行一次 crontab 周期性重复执行 通过对这两个工具的应用可以让我们 ...
- linux下mongodb定时备份指定的集合
目标:把一台linux机上mongodb的数据定时备份到另一台机上: 过程: 一开始打算使用mongoexport和mongoimport,但是总是会报“\x00”字符串不能识别的问题,后来就改成了m ...
- Linux下shell脚本实现mongodb定时自动备份
MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功 ...
- 利用腾讯云COS云对象存储定时远程备份网站
版权声明:本文由张戈 原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/942851001487125915 来源:腾云阁 h ...
- linux中服务器定时程序设定
服务器不重启的情况下定时自动重启apache及mysql服务,其实也大同小异.具体步骤如下: 一.每天的12点及16点重启apache及mysql服务 [root@www bin]# cd /opt ...
- Linux rsync数据定时增量备份
一.安装rsync服务端 1.查看是否安装rsync ps -ef | grep rsync 系统一般默认已安装,安装方法: yum -y install rsync 2.添加配置文件 rsync没有 ...
- Linux 中的定时处理 cron服务
cron服务 在LINUX中,周期执行的任务一般由cron这个守护进程来处理 当安装完操作系统后默认会安装此服务工具并且会自动启动crond,该进程会每分钟定期检查是否有要执行的任务,若有则执行. c ...
- Linux下mysql定时自动备份并FTP到远程脚本
1.添加backupmysqleveryday.sh(vi /data/shell/backupmysqleveryday.sh) #!/bin/sh #this shell is user for ...
- Linux 中我该如何备份系统
系统备份概述 在前面的一些文章中,我反复提到经常会把系统搞崩溃,所以备份系统就是一件不容忽视的事情.由于 Linux 系统本身的优越性,系统的备份和还原还是比较容易的.主要表现在以下方面: Linux ...
随机推荐
- (NO.00003)iOS游戏简单的机器人投射游戏成形记(二)
打开Ai按需求依次绘制机器人身体,手臂和篮框: 因为是实验性质的游戏所以没必要在这上面花太多功夫,画出意思即可.虽然是2D游戏,但实际游戏中可以表现出伪3D的图形效果;尽管本猫这次画的游戏元素都是满满 ...
- OC:打僵尸问题(类的问题)
1.定义普通僵尸类: 实例变量:僵尸种类.僵尸总血量.僵尸每次失血量. 方法:初始化方法(设置僵尸种类,总血量).被打击失血.死亡. 2.定义路障僵尸类: 实例变量:僵尸种类.僵尸总血量.僵尸每次失血 ...
- PorterDuffXferMode不正确的真正原因PorterDuffXferMode深入试验)
菜鸡wing遇敌PorterDuffXferMode,不料过于轻敌,应战吃力.随后与其大战三天三夜,三百余回合不分胜负.幸得 @咪咪控 相助,侥幸获胜. 关键字:PorterDuffXferMode ...
- Windows Mobile和Wince(Windows Embedded CE)的字符集问题
背景 开发过Windows Mobile和Wince(Windows Embedded CE)的开发者,特别是Native C++开发者,或多或少都遇到过ANSI字符集和Unicode字符集的转换问题 ...
- Unity3D学习笔记(二)Unity的JavaScript基础
Update()每帧调用一次LateUpdate()在Update()后执行Awake()系统执行的第一个方法Start()在Awake()之后,Update()之前FixedUpdate()固定更新 ...
- Cocos2D中的纹理大小计算
纹理占用的内存大小是纹理尺寸乘以颜色深度. 图片文件的大小一般很小.一个初学者常见的错误是假设纹理内存使用量和图片大小一致. 哎,纹理内存(对于非压缩格式)的大小可以用以下伪代码来计算: pixelW ...
- BezierDemo开源项目的学习
多看多学涨姿势,no zuo nuo die做暖男 1.概述 国际惯例,首先感谢一下开源作者. 这个项目主要是实现实现qq红点拖拽的效果 地址在https://github.com/chenupt/B ...
- 报表软件公司悬赏 BUG,100块钱1个的真实用意
上一篇文章我讲到,报表软件FineReport一反常态,做了个<提BUG,拿现金>的活动,1个BUG,100块钱.纵览软件行业,如金蝶用友浪潮IBM微软等国内外巨头,均没有这样的举动去征集 ...
- 打开Visual Studio 2010,左下角显示正在从包...加载工具箱内容,卡住5、6秒!!!
在VS2010命令提示符用 devenv /ResetSkipPkgs 或者 devenv /ResetSettings
- C#中任意类型数据转成JSON格式
/// <summary> /// List转成json /// </summary> /// <typeparam name="T&quo ...