20181219-PostgreSQL 流复制监控脚本
PostgreSQL 流复制监控脚本
https://github.com/AndyYHM/Writing/blob/PostgreSQL/20181219-PostgreSQL Stream MON.md
整理之前的脚本文档,搬家至博客园,梳理一下之前写的shell脚本
适用于PostgreSQL版本10、版本9替换函数名称即可,系统centos 7验证
_xlog_location<=> _wal_lsn
_location <=> _lsn
1. 脚本输出效果
1.1 主节点显示效果
STREAM_ROLE : Master
------------------------------
Replication Client Info:
------------------------------
PID : 25424
CLIENT_ADDR : 20.9.6.213
SYNC_STATE : async
STATE : streaming
WRITE_DIFF : 0bytes
FLUSH_DIFF : 0bytes
REPLAY_DIFF : 0bytes
Replication Client Info:
------------------------------
PID : 24586
CLIENT_ADDR : 20.9.6.212
SYNC_STATE : sync
STATE : streaming
WRITE_DIFF : 0bytes
FLUSH_DIFF : 0bytes
REPLAY_DIFF : 0bytes
1.2 从节点效果
STREAM_ROLE : Slave
------------------------------
Replication Info
------------------------------
CLUSTER_STATE : in_archive_recovery
SERVER_ADDR : 20.9.6.219
USER : replicator
APP_NAME : node12
TARGET_TIMELINE:
READ_ONLY : on
2. 功能说明
- 判定主机角色
- 如果为Master节点,则显示复制节点信息,及与主节点差值
- 如果为Replication节点,则显示为本节点相关信息
3. 使用说明
- 根据实际环境修改脚本pgdata=""
- postgres系统用户执行,保证有执行权限
- 本地执行脚本
sh pg10_stream.sh
4. pg10_stream.sh脚本内容
#!/bin/bash
################################
## Author: andy_yhm@yeah.net
## Version: 1.0
## Date: 20181219
################################
clear
host_var="/tmp"
pgdata="/pgdb/pgdata"
work_dir=$(cd `dirname $0`;pwd)
cd $work_dir
is_master=$(psql -h $host_var -c 'select pg_is_in_recovery();'| sed -n 3p)
if [ "$is_master" == " f" ];then
rep=$(psql -h $host_var -c 'select pid, client_addr, sync_state, state,pg_size_pretty( pg_wal_lsn_diff(pg_current_wal_lsn(),write_lsn)) as write_diff, pg_size_pretty(pg_wal_lsn_diff(pg_current_wal_lsn(),flush_lsn)) as flush_diff, pg_size_pretty(pg_wal_lsn_diff(pg_current_wal_lsn(),replay_lsn)) as replay_diff from pg_stat_replication;'| sed -n '3,$'p |tac | sed -n '3,$'p | sed s/" *"//g )
if [ ! "$rep" ];then
echo "Waring! No Replication Client Found"
else
printf "\n\t%-15s: %-15s\n" "STREAM_ROLE" "Master"
echo -e "\t------------------------------"
echo "$rep" | while read i
do
echo -e "\tReplication Client Info:\n\t------------------------------"
a=(null PID CLIENT_ADDR SYNC_STATE STATE WRITE_DIFF FLUSH_DIFF REPLAY_DIFF)
for j in `seq 7`
do
k=${a[j]}
echo -e "$i" | awk -v k=$k -v j=$j -F"|" '{printf "\t%-15s: %-15s\n",k,$j}'
done
echo ""
done
client_check_info=(`psql -h $host_var -c 'select client_addr from pg_stat_replication;' | sed -n '3,$'p |tac | sed -n '3,$'p | sed s/" *"//g`)
if [ ! -f pg_stream_client ]; then
echo "$client_check_info" > pg_stream_client
else
client_before=(`cat pg_stream_client`)
if [ ${#client_before[*]} -gt 0 ]; then
for i in `seq ${#client_before[*]}`
do
index=$(expr $i - 1)
if [ "${client_check_info[$index]}"x != "${client_before[$index]}"x ];then
printf "\tWarning! Replication Client Lost.\n"
else
echo "$client_check_info" > pg_stream_client
fi
done
else
printf "\tAttention! No Client Info found in pg_stream_client.\n"
fi
fi
fi
elif [ "$is_master" == " t" ];then
declare -A connect_info_dict
conninfo=$(cat $pgdata/recovery.conf| grep -i "^primary_conninfo" | awk -F"'" '{print $2}' |sed s/" *"/" "/g |sed s/"="/"\"]=\""/g | sed s/" "/"\" [\""/g | sed s/^/"[\""/g |sed s/$/"\""/g|sed s/" "/"\n"/g)
eval "connect_info_dict=($conninfo)"
cluster_state=$(pg_controldata | grep cluster | sed s/" *"/" "/g | cut -d ":" -f2| sed s/"^ "//g| sed s/" "/"_"/g)
server_addr=${connect_info_dict["host"]}
user=${connect_info_dict["user"]}
application_name=${connect_info_dict["application_name"]}
recovery_target_timeline=${connect_info_dict["recovery_target_timeline"]}
read_only=$(psql -h $host_var -c 'show transaction_read_only;' | sed -n '3p')
output(){
printf "\t%-15s: %-15s\n" $1 $2
}
printf "\n\t%-15s: %-15s\n" "STREAM_ROLE" "Slave"
echo -e "\t------------------------------"
echo -e "\tReplication Info\n\t------------------------------"
output "CLUSTER_STATE" $cluster_state
output "SERVER_ADDR" $server_addr
output "USER" $user
output "APP_NAME" $application_name
output "TARGET_TIMELINE" $recovery_target_timeline
output "READ_ONLY" $read_only
echo ""
else
echo "Warning! Can't Connect to Database. Please Check Database Status "
fi
exit 0
psql -c 'select application_name,client_addr ,sync_state from pg_stat_replication;' | sed -n '3,$'p |tac | sed -n '3,$'p | sed s/" *"//g
20181219-PostgreSQL 流复制监控脚本的更多相关文章
- PostgreSQL 流复制+高可用
QA PgPool-II 同步 Postgresql X1 服务器准备 192.168.59.121 PostgreSQL10 192.168.59.120 PGPool-II 3.7 X2 安装Po ...
- MySQL5.7 多源复制监控脚本
#!/bin/bash :<<BLOCK Version : v1.0 2018-12-21 MySQL多源复制检测脚本 监控配置放在 $CONFIG_FILE 中,内容如下 #mysql ...
- PostgreSQL流复制
原理机制 参考--https://yq.aliyun.com/articles/51009 主备总体结构 PG主备流复制的核心部分由walsender,walreceiver和startup三个进程组 ...
- PostgreSQL流复制参数max_wal_senders详解
转自:http://my.oschina.net/Kenyon/blog/152234PostgreSQL 9.2.4 主机:192.25.10.76 从机:192.25.10.71 做postgre ...
- PostgreSQL流复制记录
参考了别人的部分,添加了自己在实践中的内容,仅做记录. 1.同步流复制中 主机操作 1.1postgresql.conf wal_level = hot_standby # 这个是设置主为wal的主机 ...
- [笔记] postgresql 流复制(streaming replication)
基本环境说明: os:FreeBSD 9.3 postgresql version: master:192.168.56.101 standby:192.168.56.102 安装过程略,基于pkg包 ...
- postgresql流复制配置
一.配置环境: 示例环境 主机名 IP 角色 系统版本 数据目录 pg版本 db1 192.168.128.128 主库 RedHat5.3 /app/postgreSQL/data 9.1.7 db ...
- 再不了解PostgreSQL,你就晚了之PostgreSQL主从流复制部署
前言 在MySQL被收购之后,虽然有其替代品为: MariaDB,但是总感觉心里有点膈应.大家发现了另一款开源的数据库: PostgreSQL. 虽然centos自带版本9.2也可以用,但是最近的几次 ...
- postgresql数据库异步流复制hot standby环境搭建
生命不息,test不止. 最近组里面修改了几个postgresql的bug,要进行回归测试,除了前面提到的WAL的RT测试和Mirroring Controller的RT测试,还要测试下postgre ...
随机推荐
- Rest_framework Serializer 序列化 (含源码浅解序列化过程)
目录 Rest_framework Serializer 序列化 序列化与反序列化中不得不说的感情纠葛 三角恋之 save/update/create 四角恋之 序列化参数instance/data/ ...
- 产品经理之UML表达业务逻辑
文章大纲 一. 什么是UML二. UML基础介绍三.UML实例介绍四.参考文档 一. 什么是UML UML(Unified Modeling Language,统一建模语言) 是一种在软件设计 ...
- 基于BootstarbTable实现加载更多的方式
在工作中,我们有时候会遇到一些需求实现每次在页面上显示的数据每次都是通过请求数据库端来实现,在不通过上一页,下一页的方式来实现我们要展示的数据,通过js请求每次加载10条或者任意数量的数据. 代码展示 ...
- Chrome启动后打开第一个网页很慢的解决方案
Chrome启动后打开第一个网页很慢的解决方案 Chrome/Chromium以速度快著称,最近每当打开chrome的时候,打开第一个页面都非常慢,往往需要数十秒的时间,经分 析,应该是卡在了域名解析 ...
- Python-将json文件写入ES数据库
1.安装Elasticsearch数据库 PS:在此之前需首先安装Java SE环境 下载elasticsearch-6.5.2版本,进入/elasticsearch-6.5.2/bin目录,双击执行 ...
- 二、使用docker-compose搭建AspNetCore开发环境
1 使用docker-compose搭建开发环境 我们的目标很简单:使用docker-compose把若干个docker容器组合起来就成了. 首先使用Nginx代理所有的Web程序,这样只需要在主机上 ...
- Linux 桌面玩家指南:01. 玩转 Linux 系统的方法论
特别说明:要在我的随笔后写评论的小伙伴们请注意了,我的博客开启了 MathJax 数学公式支持,MathJax 使用$标记数学公式的开始和结束.如果某条评论中出现了两个$,MathJax 会将两个$之 ...
- 编辑器开发之 Selection 对象的学习
上一篇,介绍了 range 对象的一些属性和方法,了解了一些基本操作,现在来介绍另外一个重要的对象:selection 对象: MDN 的解释是:Selection 对象表示用户选择的文本范围或插入符 ...
- python获取set-cookies
python获取set-cookies #!/usr/bin/python3.4 # -*- coding: utf-8 -*- import requests url = "https:/ ...
- Locust性能测试学习总结
Locust学习总结分享 简介: Locust是一个用于可扩展的,分布式的,性能测试的,开源的,用Python编写框架/工具,它非常容易使用,也非常好学.它的主要思想就是模拟一群用户将访问你的网站.每 ...