Shell脚本备份Mongodb数据库
诚邀访问我的个人博客:我在马路边
更好的阅读体验点击查看原文:Shell脚本备份Mongodb数据库
原创博客,转载请注明出处
@
项目需要对Mongodb的数据进行定期备份,以免出现什么差错难以追回,但是数据量比较大,本机硬盘不够用,还要异地备份,于是乎通过通过dump远程链接目标库,然后将数据dump到另一个位置,暂时还在执行中,如果有错误再进行修改。
环境还原
- Mongodb服务器
A(Linux),备份机器B(Windows),备份移动硬盘C。 B机器可以远程A服务器,由于A和B服务器的硬盘剩余空间都不够备份,在B机器插入移动硬盘C。- 在B机器上通过VirtualBox创建
Linux虚拟机,与B机器的移动硬盘C进行共享文件夹D。 Linux虚拟机创建shell脚本,将数据备份到共享文件夹D。Linux虚拟机需要安装Mongodb数据库,如何安装数据库请参考 Centos7安装MongoDB4.0,以便执行mongodump命令。
环境创建
Linux虚拟机在共享目录<folder>下创建导出dump的文件夹和将dump文件压缩的目标文件夹,命令如下:
注:执行的时候请将下面提到的所有<folder>替换成你的目标目录,比如/media/sf_mongobak/
# 切换到你的目标目录
$ cd <folder>
# 创建文件夹
$ mkdir -p dump_bak
$ mkdir -p tar_bak
编写shell脚本
创建好文件夹后只需要编写shell脚本就可以了,shell脚本里会用到上述创建的文件夹,如果写错了执行的时候会报错,请注意。
准备文件
# 切换到你的目标目录
$ cd <folder>
# 创建shell文件
$ sudo touch mongobak.sh
# 编写文件
$ vi mongobak.sh
创建shell脚本
在mongobak.sh文件中插入如下内容,为了方便理解下面写的路径都是临时编写,请将/media/sf_mongobak自行修改成你的目录。
# 在文件中编写如下内容
## 指定到你安装的Mongodb bin目录下的mongodump
dump=/usr/local/mongodb/bin/mongodump
## 填写你创建dump_bak文件的绝对路径
out_dir=/media/sf_mongobak/dump_bak
## 填写你创建tar_bak文件的绝对路径
tar_dir=/media/sf_mongobak/tar_bak
## 记录备份时间
sysdate=`date +%Y_%m_%d`
db_user=***
db_pass=***
## 设置删除期限,删除10天前的备份
days=10
## 设置最终压缩的文件名称,带有日期
tar_bak="mondodb_bak_$sysdate.tar.gz"
cd $out_dir
# 删除之前的dump文件
sudo rm -rf $out_dir
# 创建新的文件夹存放dump文件
sudo mkdir -p $out_dir/$sysdate
# 导出172.18.9.123机器上的masterdata库的所有表到$out_dir/$sysdate文件夹
$dump -h 172.18.9.123 -u $db_user -p $db_pass -d masterdata -o $out_dir/$sysdate
# 压缩$out_dir/$sysdate到目标文件夹
sudo tar -zcvf $tar_dir/$tar_bak $out_dir/$sysdate
# 删除指定期限钱的备份文件
sudo find $tar_dir/ -mtime +$days -delete
# 退出
exit
注:上面插入的内容请注意空格,比如date +%Y_%m_%d获取时间date和+号之间就有空格。
导出dump数据的时候根据自己的需求自行修改,dump命令可参考:Mongo的备份和恢复(mongodump 和mongorestore )
执行shell脚本
给文件添加权限,然后shell命令执行。
# 添加权限
$ chmod +x mongobak.sh
# 执行shell脚本
sh +x mongobak.sh
在执行过程中遇到错误error running listCollections,还有其他的错误一般就是mongodump命令使用不对,这里参考了一篇文章:Not able to run mongodump,其他的请自行百度或者Google。
进阶版
以上满足了备份的脚本化,但是如果要做定时任务定期执行,那么就要结合linux的crontab完成,具体使用可参考文章Linux定时任务Crontab使用
感谢
诚邀访问我的个人博客:我在马路边
更好的阅读体验点击查看原文:Shell脚本备份Mongodb数据库
原创博客,转载请注明出处
Shell脚本备份Mongodb数据库的更多相关文章
- 用shell脚本实现MongoDB数据库自动备份
一.创建MongoDB备份目录 用来存放数据 mkdir -p /data/mongodb_bak/mongodb_bak_now mkdir -p /data/mongodb_bak/mongodb ...
- linux shell脚本备份mysql数据库
#!/bin/sh # 备份数据库 # Mysql 用户名密码 MYSQL_USER=root MYSQL_PASS=root BACKUP_DIR=/data/backup/mysql DATA_D ...
- centos6.5环境通过shell脚本备份php的web及mysql数据库并做远程备份容灾
centos6.5环境通过shell脚本备份php的web及mysql数据库并做远程备份容灾 系统:centos6.5 1.创建脚本目录 mkdir -p /usr/local/sh/ 创建备份web ...
- shell脚本操作mysql数据库
shell脚本操作mysql数据库,使用mysql的-e参数可以执行各种sql的(创建,删除,增,删,改.查)等各种操作 mysql -hhostname -Pport -uusername -pp ...
- 如何通过shell脚本操作MongoDB
通过shell脚本对MongoDB进行自动化操作 运行写好的 ./show.sh 脚本 发现能够建立mongo链接 #!/bin/sh mongo WordPress --eval "sho ...
- shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查)
shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查) Shell脚本与MySQL数据库交互(增删改查) # 环境准备:安装mariadb 数据库 [ro ...
- shell 脚本操作informix数据库
shell 脚本操作informix数据库的简单模板: functionName(){ dbaccess << ! database 库名; sql语句; ! } 栗子1:更新数据 fun ...
- Linux下shell脚本实现mongodb定时自动备份
MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功 ...
- Shell脚本备份数据库
使用crontab 定时备份数据库 1. 编辑crontab 规则,定时执行脚本 2. 在my.cnf 文件中加 [mysqldump] user=root password=密码 3.编写shell ...
随机推荐
- Informatica can bind a LONG value only for insert into a LONG column Oracle
Informatica实现etl同步表数据信息时 报: Severity Timestamp Node Thread Message Code Message ERROR 2016/8/8 17:32 ...
- 17 南宁区域赛 F - The Chosen One 【规律】
题目链接 https://nanti.jisuanke.com/t/19972 题意 给出一个n 然后将 n 个数 标号为 1 -> n 按顺序排列 每次抽掉 奇数位的数 然后求最后剩下那个数字 ...
- Linux下运行java项目
最近初步接触了linux,感觉很有新鲜感.之前在windows下干过的事情也便想到在linux环境下实现一下.正好手头在编java,就想既然java可以在windows的DOS操作下运行,是不是也可以 ...
- MFC输出调试信息
刚学mfc时只知道用MessageBox输出,可是MessageBox只能输出字符串, 对于习惯于printf的我来说非常不便,后来查了一下mfc可以像printf一样输出, 就是TRACE这个宏,用 ...
- Shell编程之Expect自动化交互程序
一.Expect自动化交互程序 1.spawn命令 通过spawn执行一个命令或程序,之后所有的Expect操作都会在这个执行过的命令或程序进程中进行,包括自动交互功能. 语法: spawn [ 选项 ...
- Class文件结构(更新中)
Class文件是一组以8位字节为单位的二进制流,当遇见需要占用8位字节以上空间的数据项时,则会按照高位在前的方式分割成若干个8位字节进行存储. 格式,采用伪结构,只有两种数据结构:无符号数和表. 无符 ...
- 20145231《Java程序设计》第四次实验报告
实验四 Android开发基础 实验内容 •安装Android Studio •运行安卓AVD模拟器 •使用Android运行出模拟手机并显示自己的学号 实验步骤 一.安装Android Studio ...
- 在各种Linux发行版上安装Git的教程
Git是一个流行的开源版本控制系统(VCS),最初是为Linux环境开发的.跟CVS或者SVN这些版本控制系统不同的是,Git的版本控制被认为是“分布式的”,某种意义上,git的本地工作目录可以作为一 ...
- Java Hibernate 5.3.x
SchemeExport Hibernate根据实体类和实体类映射文件自动生成表结构. 示例代码: <?xml version='1.0' encoding='utf-8'?> <! ...
- 【51nod1519】拆方块[Codeforces](dp)
题目传送门:1519 拆方块 首先,我们可以发现,如果第i堆方块被消除,只有三种情况: 1.第i-1堆方块全部被消除: 2.第i+1堆方块全部被消除:(因为两侧的方块能够保护这一堆方块在两侧不暴露) ...