诚邀访问我的个人博客:我在马路边

更好的阅读体验点击查看原文:Shell脚本备份Mongodb数据库

原创博客,转载请注明出处

@

项目需要对Mongodb的数据进行定期备份,以免出现什么差错难以追回,但是数据量比较大,本机硬盘不够用,还要异地备份,于是乎通过通过dump远程链接目标库,然后将数据dump到另一个位置,暂时还在执行中,如果有错误再进行修改。


环境还原

  • Mongodb服务器A(Linux),备份机器B(Windows),备份移动硬盘C。
  • B机器可以远程A服务器,由于AB服务器的硬盘剩余空间都不够备份,在B机器插入移动硬盘C。
  • 在B机器上通过VirtualBox创建Linux虚拟机,与B机器的移动硬盘C进行共享文件夹D
  • Linux虚拟机创建shell脚本,将数据备份到共享文件夹D
  • Linux虚拟机需要安装Mongodb数据库,如何安装数据库请参考 Centos7安装MongoDB4.0,以便执行mongodump命令。

环境创建

Linux虚拟机在共享目录<folder>下创建导出dump的文件夹和将dump文件压缩的目标文件夹,命令如下:

注:执行的时候请将下面提到的所有<folder>替换成你的目标目录,比如/media/sf_mongobak/

# 切换到你的目标目录
$ cd <folder> # 创建文件夹
$ mkdir -p dump_bak
$ mkdir -p tar_bak

编写shell脚本

创建好文件夹后只需要编写shell脚本就可以了,shell脚本里会用到上述创建的文件夹,如果写错了执行的时候会报错,请注意。

准备文件

# 切换到你的目标目录
$ cd <folder> # 创建shell文件
$ sudo touch mongobak.sh # 编写文件
$ vi mongobak.sh

创建shell脚本

mongobak.sh文件中插入如下内容,为了方便理解下面写的路径都是临时编写,请将/media/sf_mongobak自行修改成你的目录。

# 在文件中编写如下内容
## 指定到你安装的Mongodb bin目录下的mongodump
dump=/usr/local/mongodb/bin/mongodump
## 填写你创建dump_bak文件的绝对路径
out_dir=/media/sf_mongobak/dump_bak
## 填写你创建tar_bak文件的绝对路径
tar_dir=/media/sf_mongobak/tar_bak
## 记录备份时间
sysdate=`date +%Y_%m_%d`
db_user=***
db_pass=***
## 设置删除期限,删除10天前的备份
days=10
## 设置最终压缩的文件名称,带有日期
tar_bak="mondodb_bak_$sysdate.tar.gz" cd $out_dir
# 删除之前的dump文件
sudo rm -rf $out_dir
# 创建新的文件夹存放dump文件
sudo mkdir -p $out_dir/$sysdate
# 导出172.18.9.123机器上的masterdata库的所有表到$out_dir/$sysdate文件夹
$dump -h 172.18.9.123 -u $db_user -p $db_pass -d masterdata -o $out_dir/$sysdate
# 压缩$out_dir/$sysdate到目标文件夹
sudo tar -zcvf $tar_dir/$tar_bak $out_dir/$sysdate
# 删除指定期限钱的备份文件
sudo find $tar_dir/ -mtime +$days -delete
# 退出
exit

注:上面插入的内容请注意空格,比如date +%Y_%m_%d获取时间date+号之间就有空格。

导出dump数据的时候根据自己的需求自行修改,dump命令可参考:Mongo的备份和恢复(mongodump 和mongorestore )

执行shell脚本

给文件添加权限,然后shell命令执行。

# 添加权限
$ chmod +x mongobak.sh # 执行shell脚本
sh +x mongobak.sh

在执行过程中遇到错误error running listCollections,还有其他的错误一般就是mongodump命令使用不对,这里参考了一篇文章:Not able to run mongodump,其他的请自行百度或者Google。

进阶版

以上满足了备份的脚本化,但是如果要做定时任务定期执行,那么就要结合linux的crontab完成,具体使用可参考文章Linux定时任务Crontab使用

感谢

参考来源:用shell脚本实现MongoDB数据库自动备份

诚邀访问我的个人博客:我在马路边

更好的阅读体验点击查看原文:Shell脚本备份Mongodb数据库

原创博客,转载请注明出处

Shell脚本备份Mongodb数据库的更多相关文章

  1. 用shell脚本实现MongoDB数据库自动备份

    一.创建MongoDB备份目录 用来存放数据 mkdir -p /data/mongodb_bak/mongodb_bak_now mkdir -p /data/mongodb_bak/mongodb ...

  2. linux shell脚本备份mysql数据库

    #!/bin/sh # 备份数据库 # Mysql 用户名密码 MYSQL_USER=root MYSQL_PASS=root BACKUP_DIR=/data/backup/mysql DATA_D ...

  3. centos6.5环境通过shell脚本备份php的web及mysql数据库并做远程备份容灾

    centos6.5环境通过shell脚本备份php的web及mysql数据库并做远程备份容灾 系统:centos6.5 1.创建脚本目录 mkdir -p /usr/local/sh/ 创建备份web ...

  4. shell脚本操作mysql数据库

    shell脚本操作mysql数据库,使用mysql的-e参数可以执行各种sql的(创建,删除,增,删,改.查)等各种操作 mysql  -hhostname -Pport -uusername -pp ...

  5. 如何通过shell脚本操作MongoDB

    通过shell脚本对MongoDB进行自动化操作 运行写好的 ./show.sh 脚本 发现能够建立mongo链接 #!/bin/sh mongo WordPress --eval "sho ...

  6. shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查)

    shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查) Shell脚本与MySQL数据库交互(增删改查) # 环境准备:安装mariadb 数据库 [ro ...

  7. shell 脚本操作informix数据库

    shell 脚本操作informix数据库的简单模板: functionName(){ dbaccess << ! database 库名; sql语句; ! } 栗子1:更新数据 fun ...

  8. Linux下shell脚本实现mongodb定时自动备份

    MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功 ...

  9. Shell脚本备份数据库

    使用crontab 定时备份数据库 1. 编辑crontab 规则,定时执行脚本 2. 在my.cnf 文件中加 [mysqldump] user=root password=密码 3.编写shell ...

随机推荐

  1. asp.net 利用Response.Filter 获取输出内容, 变更输出内容

    重写 Response.Filter 就可以获取或更新输出到浏览器的内容       资料: https://weblog.west-wind.com/posts/2009/Nov/13/Captur ...

  2. 谷歌机器学习速成课程---3降低损失 (Reducing Loss):梯度下降法

    迭代方法图(图 1)包含一个标题为“计算参数更新”的华而不实的绿框.现在,我们将用更实质的方法代替这种华而不实的算法. 假设我们有时间和计算资源来计算 w1 的所有可能值的损失.对于我们一直在研究的回 ...

  3. Loadrunder脚本篇——Run-time Settings之Browser Enmulation

    浏览器模拟 所有Internet Vuser Header包含一个标识将被模拟的浏览器类型(或无线工具包)的User Agent header.例如User-Agent: Mozilla/3.01Go ...

  4. Struts2笔记04——Hello World Example(转)

    原文地址:https://www.tutorialspoint.com/struts_2/ [注释]项目结构,次序估计有误 通过学习Struts2的架构,我们可以知道,在Struts2 web应用中, ...

  5. [POI2009]Slw

    题目 神题!!只有\(POI\)出得出来的神题!! 只能说好像懂了,不想听蒟蒻废话就右转\(dalao\)的博客 目前网上除官方外仅三篇题解,由于推论无法直观得出且有点复杂,难免不好理解,手玩数据最重 ...

  6. 请求静态文件,返回http状态码405,not allowed

    昨天在首页加了一个链接,点击这个a标签,会进入http://121.43.68.40/boxpro/template/addsite.pdf,测试环境完全没有问题,上传到正式服务器之后,点击A标签,死 ...

  7. nginx日志中$request_body 十六进制字符(\\x22) 引号问题处理记录

    在使用nginx记录访问日志时,发现在含有 request_body 的 PUT , POST 请求时,日志中会含有 x22 x9B x5C x09 x08 字符,不利于阅读和处理. 具体 支持 re ...

  8. springmvc中url-url-pattern /和/*的区别

    在使用springmvc时,都会在web.xml中配置一个dispatchservlet,如下: <listener> <listener-class> org.springf ...

  9. Maven——安装配置

    MAVEN 一.介绍:(待填) 二.下载:http://maven.apache.org/download.cgi(官网下载) 选择二进制的zip文件,这种的可直接使用. 三.环境配置 1.前提条件: ...

  10. python之Django admin总结

    一.Django内置admin      a.配置路由 urlpatterns = [ url(r'^admin/', admin.site.urls), ] b.定制admin 在admin.py中 ...