Linux 下的 PostgreSQL 数据库+文件通用自动备份脚本
由于 Odoo(原名 OpenERP)自 8.0 以来会生成 CSS,并把附件存储在文件系统中,因此以前单纯备份数据库的脚本已经不够用了。出于实际部署的考虑,我专门写了个较为通用的 Odoo 备份脚本,不仅能备份 PostgreSQL 数据库,还能包括 Odoo 在文件系统存储的数据文件一起备份,也能备份相应的配置等。
本备份脚本会将数据库、Odoo 的数据文件及指定目录的其他文件(含子目录)一起打包到一个 .7z 的压缩包中,非常便于同步到本地。
#!/usr/bin/python
#encoding: utf-8
# A automatic backup script for Odoo # Please run it by crontab from datetime import datetime, date, time
import os, sys, time
from subprocess import call PG_SYSUSER = 'postgres' profiles = [ # First profile
{
'name': 'odoo1', # 此 profile 的名称,注意此名称会作为文件名的一部分,推荐只使用数字和字母
'backup_dir': '/var/backup/odoo', # 存放备份文件的目录
'expired_days': 30, # 保留 30 天的备份文件
'dbs': ['odoodb'], # 要备份的 数据库
'dirs': ['/var/odoo/runtime/filestore', '/etc/nginx'] # 要包含到备份中的目录或文件,如果你愿意可以连 odoo 代码一起备份
} ] def remove_files_before(dir_path, days):
now = time.time()
cutoff = now - (days * 86400)
files = os.listdir(dir_path)
for filename in files:
file_path = os.path.join(dir_path, filename)
if not os.path.isfile(file_path):
continue
fs = os.stat(file_path)
file_time = fs.st_ctime
# delete file if older than 10 days
if file_time < cutoff:
print 'Deleteing file: ', file_path
os.remove(filename) def dump_pgdb(dir_path, dbname):
cmd = 'sudo -u {0} vacuumdb -z {1}'.format(PG_SYSUSER, dbname)
print cmd
os.system(cmd)
dump_path = os.path.join(dir_path, dbname + '.pgdump')
cmd = "sudo -u {1} pg_dump --no-owner --format=c -b -f {0} {2}".format(dump_path, PG_SYSUSER, dbname)
print cmd
os.system(cmd)
return os.path.join(dir_path, dbname + '.pgdump') #remove_files_before('/data/backup/xindi', 10) def backup_snapshot(profile):
paths = []
#第一步备份数据库
dbs = profile['dbs']
temp_dumps = []
for db in dbs:
dump_path = dump_pgdb('/tmp', db)
temp_dumps.append(dump_path)
paths.append(dump_path)
#第二步打包
for dir in profile['dirs']:
paths.append(dir)
paths_arg = ' '.join(paths)
now = datetime.now()
archive_name = 'snapbak_{0}_{1}.7z'.format(profile['name'], now.strftime('%Y%m%d%H%M%S'))
archive_path = os.path.join(profile['backup_dir'], archive_name)
cmd = '7z a {0} {1}'.format(archive_path, paths_arg)
print cmd
os.system(cmd)
# Remove the database dump file in /tmp
for td in temp_dumps:
os.remove(td) remove_files_before(profile['backup_dir'], profile['expired_days']) for profile in profiles:
print 'Processing profile ' + profile['name']
backup_snapshot(profile)
使用方法:
1. 安装依赖项
假设使用 debian/ubuntu:
$sudo apt-get install sudo p7zip-full
2. 创建脚本
$sudo mkdir /opt/bin
$sudo vim /opt/bin/autobackup.py
$sudo chmod a+x /opt/bin/autobackup.py
3. 在 cron 中设置定时任务
crontab -e
在打开的编辑器中输入:
0 3 * * * /opt/bin/auto_backup.py
表示每天夜里三点执行此自动备份任务。
最后重启系统即告完成。
Happy Hacking!
Linux 下的 PostgreSQL 数据库+文件通用自动备份脚本的更多相关文章
- Linux下实现MySQL数据库每天定时自动备份
使用MySQL自带的备份工具+ crontab 的方式来实现备份 1.查看磁盘挂载信息(选一个容量合适的) #df -h 2.创建备份目录 为了方便,在/home保存备份文件: cd /home/ga ...
- linux下rm误删除数据库文件的恢复方法
在linux redhat 5.4版本,rm误删除数据库文件的恢复过程分享.测试没有问题,可用. 1.首先测试rm 误删除数据库文件 [oracle@primary dbwdn]$ ll total ...
- Linux下设置postgresql数据库开机启动
PostgreSQL的开机自启动脚本位于PostgreSQL源码目录的contrib/start-scripts路径下,linux文件即为linux系统上的启动脚本: 1.将Linux文件复制到 /e ...
- Linux下实现mysql数据库每天自动备份
Linux下实现mysql数据库每天自动备份 1.基本操作步骤 a.创建备份目录 mkdir -m 777 /home/wwwroot/backup b.创建备份脚本sh vim /home/wwwr ...
- windows下数据库文件使用脚本同步到linux下的mysql数据库中
1.背景 windows server 2008 下 每天会有 *.sql数据文件 需要上传到linux 中的mysql数据库中 而运维人员是在 windows server 下使用 xshell 连 ...
- Linux下安装PostgreSQL 转载linux社区
Linux下安装PostgreSQL [日期:2016-12-25] 来源:Linux社区 作者:xiaojian [字体:大 中 小] 在Linux下安装PostgreSQL有二进制格式安装和 ...
- Linux 下 Vi 配置文件 .vimrc 文件
Linux 下 Vi 配置文件 .vimrc 文件 配置 vim 的方法是在用户主目录下建立个.vimrc文件,我一般使用root帐户,所以就在/root/下建立一个.vimrc文件:vi /root ...
- linux下为目录和文件设置权限
摘:linux下为目录和文件设置权限 分类: Linux2012-05-09 03:18 7456人阅读 评论(1) 收藏 举报 linuxwordpressweb数据库serverfile linu ...
- Linux下用到数据库sqlite3
最近在Linux下用到数据库sqlite3,于是开始了该方面的学习. 0. 引言 我们这篇文章主要讲述了如何在C/C++语言中调用 sqlite 的函数接口来实现对数据库的管理, 包括创建数据库.创建 ...
随机推荐
- 聊聊fetch
fetch的使用 fetch是一个发起异步请求的新api, 在浏览器(有些不支持)中可以直接使用. Promise fetch(url, init) fetch接收两个参数,第一个参数是请求路径,第二 ...
- 分布式任务调度系统xxl-job源码探究(一、客户端)
前面讲了xxl-job的搭建,现在来粗略的解析下该分布式调度系统的源码,先来客户点代码 客户端源码 客户端开启的时候会向服务中心进行注册,其实现用的是jetty连接,且每隔半分钟会发送一次心跳,来告诉 ...
- 机器学习基石笔记:08 Noise and Error
噪声:误标.对同一数据点的标注不一致.数据点信息不准确...... 噪声是针对整个输入空间的. 存在噪声的情况下,VC bound依旧有用: 存在噪声,就是f------>p(y|x),f是p的 ...
- javascript 异步解析
js 异步解析 一 .js单线程分析 我们都知道js的一大特点是单线程,也就是同一时间点,只能处理一件事,一句js代码.那为什么js要设计成单线程而不是多线程呢?这主要和js的用途有关,js作为浏览器 ...
- python(31)——【sys模块】【json模块 & pickle模块】
一.sys模块 import sys sys.argv #命令行参数List,第一个元素是程序本身路径 sys.exit() #退出程序,正常退出时exit(0) sys.version #获取pyt ...
- python 变量进阶(理解)
变量进阶(理解) 目标 变量的引用 可变和不可变类型 局部变量和全局变量 01. 变量的引用 变量 和 数据 都是保存在 内存 中的 在 Python 中 函数 的 参数传递 以及 返回值 都是靠 引 ...
- python3模块: os
简介 os模块主要用于提供系统高级别的操作. 常用方法 os.access(path, mode) # 检验权限模式 os.chdir(path) # 改变当前工作目录 os.chflags(path ...
- 使用pipenv隔离不同项目的依赖包
pipenv可以为不同的路径创建python环境和依赖包,结合pyenv可以达到为不同项目使用不同python版本,不同依赖包的目的. pip install pipenv #安装pipenv 使用p ...
- 全网最详细的Eclipse和MyEclipse里对于Java web项目发布到Tomcat上运行成功的对比事宜【博主强烈推荐】【适合普通的还是Maven方式创建的】(图文详解)
不多说,直接上干货! 首先,大家要明确,IDEA.Eclipse和MyEclipse等编辑器之间的新建和运行手法是不一样的. 全网最详细的MyEclipse里如何正确新建普通的Java web项目并发 ...
- mysql遇见contains nonaggregated column 'information_schema.PROFILING.SEQ'异常
报错如下:[Err] 1055 - Expression #1 of ORDER BY clause is not in GROUP BY clause and contains nonaggrega ...