背景及原理 数据库的备份是灾难恢复的最后一道屏障,不管什么类型的数据库都需要设置数据库备份,MongoDB也不例外.MongoDB 3.0 后 ,数据库可以采用Wiredtiger存储引擎后(3.2 版本默认),在此环境下通过mongodump 备份后,产生的备份文件要远大于数据存储文件的大小.此外,一般MongoDB存储的数据量比较大,备份文件也比较大,占用了很多磁盘空间.所以,研究如何实现MongoDB备份压缩很有必要. 上图是执行命令 db.stats() 查看某数据库的信息. 备份文件的…

Mongodb 备份与还原 Mongodb 备份与还原 文件快照 快照备份 快照直接还原 从压缩文件还原 复制文件 备份文件 从文件还原 mongodump mongodump备份 mongodump还原 问题及解决方法 文件快照 利用Linux LVM 逻辑卷管理,制作快照后,将快照映像挂载到文件系统上并从快照复制数据.生成的备份包含所有数据的完整副本,从而达到备份数据库. 注意:Mongodb数据与日志目录需要启动在逻辑卷挂载到目录中 快照备份 db.fsyncLock(); # 锁定数据库…

TODO:MongoDB MySQL数据库备份 1. MongoDB使用命令备份 mongodump进行整个数据库备份,主要用到的命令参数: -d 要备份的数据库 -o 输出的路径 ./mongodump –d databasename –o /data/dbbak 备份成功后会在/data/dbbak创建以数据库名的文件夹,文件夹下都是备份文件 2. MongoDB使用命令还原 mongorestore进行数据库还原,主要用到的命令参数: -d 要恢复的数据库 -directoryperdb…

mongodb数据库维护离不开必要的备份.恢复操作,而且一般不会出错,所以我们在使用的时候大部分时候使用备份和恢复操作就可以了   mongodump.exe备份的原理是通过一次查询获取当前服务器快照,并将快照写入磁盘中,因此这种方式保存的也不是实时的,因为在获取快照后,服务器还会有数据写入,为了保证备份的安全,同样我们还是可以利用fsync锁使服务器数据暂时写入缓存中. 高效开源数据库(mongodb)下载地址:http://www.jb51.net/softs/41751.html 备份前的…

--数据库备份压缩拷贝实例:前提要安装RAR压缩软件--声明变量declare @day varchar(10),@dbname varchar(20),@filename varchar(100),@cmd_str varchar(500),@local_name varchar(500)--初始变量值set @day = convert(varchar(10),getdate(),112)set @dbname='database'set @filename=@dbname+@dayset…

mongodb 使用mongodump备份 指定用户名密码 出现错误 [root@MongoDB ~]# mongodump --host -u admin -p -d db1 -o /root/ Failed: error connecting to db server: server returned error on SASL authentication step: Authentication failed 解决方法: 添加--authenticationDatabase admin…

oracle rman自带的备份压缩机制,可以有效的压缩备份的大小,降低磁盘的占用率.但是也会因为压缩而消耗更多的系统性能,和增加备份时间.现在就通过实验来看压缩和不压缩的区别. 进行不压缩全备 RMAN> backup database format '/RmanBackup/full_%d_%T_%s_%p.DBFILE'; ... 通道 ORA_DISK_1: 备份集完成, 用时: ::55... 通道 ORA_DISK_1: 备份集完成, 用时: ::05... 通道 ORA_DISK_…

1.Oracle参考文档中关于RMAN备份压缩的描述1)关于如何通过调整RMAN参数启用取消备份压缩功能http://download.oracle.com/docs/cd/B19306_01/backup.102/b14192/setup004.htm#sthref229使用关键字COMPRESSED启用RMAN压缩备份方法RMAN> CONFIGURE DEVICE TYPE DISK BACKUP TYPE TO COMPRESSED BACKUPSET;去掉COMPRESSED关键字取消…

mongodb 数据库操作--备份 还原 导出 导入   -------------------MongoDB数据导入与导出------------------- 1.导出工具:mongoexport     1.概念:         mongoDB中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件.可以通过参数指定导出的数据项,也可以根据指定的条件导出数据.     2.语法:         mongoexport -d dbname -c c…

测试环境:Windows Azure上海机房,虚拟机配置为大型(四核,7 GB 内存),磁盘情况见下图. 数据库备份压缩文件大于为12.0 GB (12,914,327,552 bytes),放置于Temporary Storage(D:). 数据库恢复操作命令如下: , MOVE N'CNBlogsText' TO N'F:\DATA\CNBlogsText.mdf', MOVE N 也就是从D盘恢复至F盘. 实测恢复耗时1小时44分15秒. 与其他云服务商的对比: 4月份在阿里云上做的数据库…

1. 前言 由于线上的mongodb 数据体量越来越大,如果没有完善的备份方案,发生故障势必造成业务很长时间的暂停.参考了网上方案,写出以下总结和备份方案: 备份方案分为两种:全备和增量备份,二者结合起来使用. 参考链接:https://www.cnblogs.com/xuliuzai/p/9917137.html  感谢作者的分享. 2. 构建mongodb 副本集测试环境 首先在测试环境进行测试,过程如下: 测试机:192.168.118.16  系统:CentOS 7 首先搭建mongod…

部署完毕nginx之后,发现自己的/var/log/nginx/*log的日志不会压缩,一直都是一个文本写日志, 时间久了,日志文件内存过于增加,将会导致在日志添加过程效率降低,延长时间. 默认安装的nginx都会每天凌晨自动去备份,但是也有nginx 不会自动备份压缩日志, 于是我们先使用命令看看配置: cat /etc/logrotate.d/nginx 当然也可以直接修改 vim /etc/logrotate.d/nginx 然后把我下面的命令粘贴进去 /var/log/nginx/*lo…

下载mongodb https://www.cnblogs.com/tartis/p/5291580.html mongodb定时备份文档 虚拟机报错要改BIOS 虚拟技术开启 进入root账户  su root 回车输入密码 一.创建MongoDB备份目录 mkdir -p /data1/mongodb_bak/mongodb_bak_now mkdir -p /data1/mongodb_bak/mongodb_bak_list 二.新建MongoDB数据库备份脚本(/data1/mongo…

创建Mongodb数据库备份目录 mkdir -p ~/backup/mongod_bak/mongod_bak_now mkdir -p ~/backup/mongod_bak/mongod_bak_list 新建Mongodb数据库备份脚本 mkdir ~/crontab/ && vi ~/crontab/mongod_bak.sh #新建文件,输入以下代码 #!/bin/sh DUMP=~/mongodb-linux-x86_64-4.0.1/bin/mongodump # mong…

MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的. 它支持的数据结构非常松散,是类似json的bson格式,因此可以存储比较复杂的数据类型. Mongo最大的特点是它支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引. 1.创建备份目录…

一.创建MongoDB备份目录 用来存放数据 mkdir -p /data/mongodb_bak/mongodb_bak_now mkdir -p /data/mongodb_bak/mongodb_bak_list 二.创建MongoDB数据库备份脚本   #!/bin/bash# DUMP=/usr/local/mongodb/bin/mongodump    #mongodump命令路径 OUT_DIR=/data/mongodb_bak/mongodb_bak_now    #临时备份…

需要提前安装mongodb-database-tools参考:centos离线安装mongodb-database-tools 导出数据 常用的导出有两种:mongodump和mongoexport,两种方式的区别: 1.mongodump导出的文件格式是bson,mongoexport导出的文件格式是json和csv,可读性高. 2.mongodump只能指定到集合,mongoexport可以指定到字段. 3.mongodump导出速度快,压缩率高,适合备份全库文件,mongoexport适合…

mongodb数据备份和还原主要分为二种,一种是针对于库的mongodump和mongorestore,一种是针对库中表的mongoexport和mongoimport 一,mongodump备份数据库 1,常用命令格 1 mongodump -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -o 文件存在路径 如果没有用户谁,可以去掉-u和-p.如果导出本机的数据库,可以去掉-h.如果是默认端口,可以去掉--port.如果想导出所有数据库,可以去掉-d. 2,导出所有数据…

备份打包:tar 指令名称:tar语法:tar 选项[zcvf] [文件或目录]-z 使用gzip压缩.tar文件-c 产生一个.tar文件-v 观看归档过程-f 指定归档后的文件功能描述:归档文件目录归档后文件格式:.tar 范例:$ tar cvf mymail.tar Mail/将目录Mail/下所有文件归档成一个文件.$ gzip -9 mymail.tar最佳状况压缩生成的mymail.tar tar的解压缩语法:tar xvf mymail.tar-x 将归档包解析成文件-t 测试归…

备份 1. 只有在有信心能在紧急情况下完成迅速部署的情况下,备份才是有用的.所以,无论选择了哪种备份技术,一定要对备份及恢复备份的操作进行练习,知道了然于心. 2. 通常情况下,应对副本集的非主节点(与主节点相对)进行备份. 3. 对服务器进行备份 1). 文件系统快照:使用快照备份需要开启日记系统.该方法无需其他准备,只需生成快照即可,时间不限. 如果是对正在运行的系统生成快照,那么快照的数据内容本质让相当于使用kill -9 命令强制终止后的数据内容.因此,mongod在启动时会对日志文件进…

mongodb数据库同样离不开必要的维护,如备份.恢复.导入.导出. 其实备份和恢复比导入和导出要方便些,而且一般不会出错,所以大部分时候使用备份和恢复操作就可以了 1. 备份Mongodb mongodump -h RuiyIp -d dataname -o /home/aa/dev/mongodb/data mongodump mongo导出数据库命令 mongodump --help 可以查看该命令下所有的帮助 -h 导出源 -d 要导出的数据库名称 -o 数据库要导出的位置 在终端滚过N…

<?php$server = 'localhost'; $link = mysql_connect($server, 'root', 'haven'); $result = mysql_query('show databases'); echo '<pre>'; while ($row = mysql_fetch_array($result)) {  @mysql_select_db($row[0]);  system("/usr/bin/mysqldump $row[0] -…

一 需求描述 我们知道数据是公司的重要资产,业务的系统化.信息化就是数字化.数据高效的存储与查询是系统完善和优化的方向,而数据库的稳定性.可靠性是实现的基础.高可用和RPO(RecoveryPointObjective,复原点目标,指能容忍的最大数据丢失量)是衡量一个数据库优劣的重要指标.作为一个DBA,搭建数据库可靠性体系时,一定会要考虑对数据库进行容灾备份.例如,SQL Server类型的数据库,我们一定会部署作业,定期进行完整备份.差异备份和日志备份:MySQL 数据库同样如此,也是定期进…

使用7z的版本: @echo offset filename="d:\backup\dbname_%date:~0,10%"set zipfile="d:\backup\dbname_%date:~0,7%"set zip_cmd="C:\Program Files\7-Zip\7z.exe"echo 正在备份数据 ......exp username/password@servicename owner=owner file=%filename…

MongoDB的备份其实算是一个基本操作,最近总是有人问起,看来很多人对这里还不太熟悉.为了避免一次又一次地重复解释,特总结成一篇博客供后来者查阅.如有不尽正确之处请指正. 1. 内建方法 1.1 复制数据库文件 不用多做解释,几乎对任何数据库都有用,简单粗暴.但像多数数据库一样,这个操作必须在mongod实例停止的情况下进行才能保证你得到的是正确状态下的数据库.否则在备份过程中如果有写操作,可能造成备份到的库处于非正常状态而不可使用.必须停止数据库这一点就造成了这个方法的可用性非常低,使用场景…

.mysqldump 备份并压缩sql文件 mysql>mysqldump -h主机ip -u用户名 -p密码(也可不输入) 数据库名 | gzip > 压缩后文件位置 .mysql直接用压缩文件恢复 mysql>gunzip < backupfile.sql.gz | mysql -u用户名 -p密码(也可不输入) 数据库名…

备份前检查: [root@Load29 tmp]# mongo localhost: MongoDB shell version: connecting to: localhost:/test Server has startup warnings: --21T01:: I CONTROL [initandlisten] ** WARNING: You are running this process as the root user, which is not recommended. --2…

MongoDB bin文件夹下 备份:mongodump -h IP:PORT -d 库名 -c 集合名 -o 存储路径 恢复:mongorestore -h IP:PORT -d 库名 -c 集合名 存储路径\文件名.bson 当多个bson文件需要恢复到同一个数据集合时,依次对bson文件做数据恢复操作即可,不会覆盖. json文件导入:mongoimport  -h IP:PORT -d 库名 -c 集合名 存储路径\文件名.json 当json文件较大时,速度较慢,可在命令行结尾加:--…

1:创建测试数据 > use maxiangqian switched to db maxiangqian "}) WriteResult({ "nInserted" : }) "}) WriteResult({ "nInserted" : }) "}) WriteResult({ "nInserted" : }) 2:做一个全备份 /bin/mongodump --host=10.103.16.34 --po…

MongoDB数据库备份方式: 1.整库备份 2.单表备份 1.整库备份 备份整个数据库: mongodump -h 127.0.0.1:27000 -d park --authenticationDatabase park -u USERNAME -p PASSWORD 恢复整个数据库: mongorestore -h 127.0.0.1:27000 -d park park --authenticationDatabase park -u USERNAME -p PASSWORD 2.单表备…