Linux 下的 PostgreSQL 数据库+文件通用自动备份脚本
由于 Odoo(原名 OpenERP)自 8.0 以来会生成 CSS,并把附件存储在文件系统中,因此以前单纯备份数据库的脚本已经不够用了。出于实际部署的考虑,我专门写了个较为通用的 Odoo 备份脚本,不仅能备份 PostgreSQL 数据库,还能包括 Odoo 在文件系统存储的数据文件一起备份,也能备份相应的配置等。
本备份脚本会将数据库、Odoo 的数据文件及指定目录的其他文件(含子目录)一起打包到一个 .7z 的压缩包中,非常便于同步到本地。
#!/usr/bin/python
#encoding: utf-8
# A automatic backup script for Odoo # Please run it by crontab from datetime import datetime, date, time
import os, sys, time
from subprocess import call PG_SYSUSER = 'postgres' profiles = [ # First profile
{
'name': 'odoo1', # 此 profile 的名称,注意此名称会作为文件名的一部分,推荐只使用数字和字母
'backup_dir': '/var/backup/odoo', # 存放备份文件的目录
'expired_days': 30, # 保留 30 天的备份文件
'dbs': ['odoodb'], # 要备份的 数据库
'dirs': ['/var/odoo/runtime/filestore', '/etc/nginx'] # 要包含到备份中的目录或文件,如果你愿意可以连 odoo 代码一起备份
} ] def remove_files_before(dir_path, days):
now = time.time()
cutoff = now - (days * 86400)
files = os.listdir(dir_path)
for filename in files:
file_path = os.path.join(dir_path, filename)
if not os.path.isfile(file_path):
continue
fs = os.stat(file_path)
file_time = fs.st_ctime
# delete file if older than 10 days
if file_time < cutoff:
print 'Deleteing file: ', file_path
os.remove(filename) def dump_pgdb(dir_path, dbname):
cmd = 'sudo -u {0} vacuumdb -z {1}'.format(PG_SYSUSER, dbname)
print cmd
os.system(cmd)
dump_path = os.path.join(dir_path, dbname + '.pgdump')
cmd = "sudo -u {1} pg_dump --no-owner --format=c -b -f {0} {2}".format(dump_path, PG_SYSUSER, dbname)
print cmd
os.system(cmd)
return os.path.join(dir_path, dbname + '.pgdump') #remove_files_before('/data/backup/xindi', 10) def backup_snapshot(profile):
paths = []
#第一步备份数据库
dbs = profile['dbs']
temp_dumps = []
for db in dbs:
dump_path = dump_pgdb('/tmp', db)
temp_dumps.append(dump_path)
paths.append(dump_path)
#第二步打包
for dir in profile['dirs']:
paths.append(dir)
paths_arg = ' '.join(paths)
now = datetime.now()
archive_name = 'snapbak_{0}_{1}.7z'.format(profile['name'], now.strftime('%Y%m%d%H%M%S'))
archive_path = os.path.join(profile['backup_dir'], archive_name)
cmd = '7z a {0} {1}'.format(archive_path, paths_arg)
print cmd
os.system(cmd)
# Remove the database dump file in /tmp
for td in temp_dumps:
os.remove(td) remove_files_before(profile['backup_dir'], profile['expired_days']) for profile in profiles:
print 'Processing profile ' + profile['name']
backup_snapshot(profile)
使用方法:
1. 安装依赖项
假设使用 debian/ubuntu:
$sudo apt-get install sudo p7zip-full
2. 创建脚本
$sudo mkdir /opt/bin
$sudo vim /opt/bin/autobackup.py
$sudo chmod a+x /opt/bin/autobackup.py
3. 在 cron 中设置定时任务
crontab -e
在打开的编辑器中输入:
0 3 * * * /opt/bin/auto_backup.py
表示每天夜里三点执行此自动备份任务。
最后重启系统即告完成。
Happy Hacking!
Linux 下的 PostgreSQL 数据库+文件通用自动备份脚本的更多相关文章
- Linux下实现MySQL数据库每天定时自动备份
使用MySQL自带的备份工具+ crontab 的方式来实现备份 1.查看磁盘挂载信息(选一个容量合适的) #df -h 2.创建备份目录 为了方便,在/home保存备份文件: cd /home/ga ...
- linux下rm误删除数据库文件的恢复方法
在linux redhat 5.4版本,rm误删除数据库文件的恢复过程分享.测试没有问题,可用. 1.首先测试rm 误删除数据库文件 [oracle@primary dbwdn]$ ll total ...
- Linux下设置postgresql数据库开机启动
PostgreSQL的开机自启动脚本位于PostgreSQL源码目录的contrib/start-scripts路径下,linux文件即为linux系统上的启动脚本: 1.将Linux文件复制到 /e ...
- Linux下实现mysql数据库每天自动备份
Linux下实现mysql数据库每天自动备份 1.基本操作步骤 a.创建备份目录 mkdir -m 777 /home/wwwroot/backup b.创建备份脚本sh vim /home/wwwr ...
- windows下数据库文件使用脚本同步到linux下的mysql数据库中
1.背景 windows server 2008 下 每天会有 *.sql数据文件 需要上传到linux 中的mysql数据库中 而运维人员是在 windows server 下使用 xshell 连 ...
- Linux下安装PostgreSQL 转载linux社区
Linux下安装PostgreSQL [日期:2016-12-25] 来源:Linux社区 作者:xiaojian [字体:大 中 小] 在Linux下安装PostgreSQL有二进制格式安装和 ...
- Linux 下 Vi 配置文件 .vimrc 文件
Linux 下 Vi 配置文件 .vimrc 文件 配置 vim 的方法是在用户主目录下建立个.vimrc文件,我一般使用root帐户,所以就在/root/下建立一个.vimrc文件:vi /root ...
- linux下为目录和文件设置权限
摘:linux下为目录和文件设置权限 分类: Linux2012-05-09 03:18 7456人阅读 评论(1) 收藏 举报 linuxwordpressweb数据库serverfile linu ...
- Linux下用到数据库sqlite3
最近在Linux下用到数据库sqlite3,于是开始了该方面的学习. 0. 引言 我们这篇文章主要讲述了如何在C/C++语言中调用 sqlite 的函数接口来实现对数据库的管理, 包括创建数据库.创建 ...
随机推荐
- PHP合并数组
1.arrary_merge 示例代码: $arr1 = array(1, 2, 3, 4, 5); $arr2 = array(1, 2, 6, 7, 8, 9, 10); $result1 = a ...
- redis key的过期时间
设置redis key的生存过期时间 Redis 有四个不同的命令可以用于设置键的生存时间(键可以存在多久)或过期时间(键什么时候会被删除) : EXPlRE 命令用于将键key 的生存时间设置为tt ...
- win10 + cuda8.0 + caffe SSD + vs2015 + python3
一.下载 git clone https://github.com/runhang/caffe-ssd.git cd caffe-ssd 1. 修改 build_win.cmd if !PYTHON_ ...
- javascript实现二分法
js 实现数组查找二分法 二分法实现原理:二分查找可以解决已经排好序数组的查找问题:只要数组中包含target(即要查找的值),那么通过不断缩小包含target数组的范围,最终就可以找到它. 其算法流 ...
- spring boot -thymeleaf-域对象操作
后台代码
- Android并发编程 开篇
该文章是一个系列文章,是本人在Android开发的漫漫长途上的一点感想和记录,我会尽量按照先易后难的顺序进行编写该系列.该系列引用了<Android开发艺术探索>以及<深入理解And ...
- ACM学习<二>
穷举算法思想: 一句话:就是从所有可能的情况,搜索出正确的答案. 步骤: 1.对于一种可能的情况,计算其结果. 2.判断结果是否满足,YES计算下一个,no继续步骤1,然后判断 ...
- TensorFlow中数据读取之tfrecords
关于Tensorflow读取数据,官网给出了三种方法: 供给数据(Feeding): 在TensorFlow程序运行的每一步, 让Python代码来供给数据. 从文件读取数据: 在TensorFlow ...
- MySQL 5.6 GTID Replication
一. MySQL 5.6引入了GTID的概念,那么GTID是何方神圣?其实也不复杂,就是一个全局事务标示符.使用GTID时,每次事务提交都会在binlog里生成1个唯一的标示符,它由UUID和事务ID ...
- Java并发编程笔记之ThreadLocal内存泄漏探究
使用 ThreadLocal 不当可能会导致内存泄露,是什么原因导致的内存泄漏呢? 我们首先看一个例子,代码如下: /** * Created by cong on 2018/7/14. */ pub ...