Postgresql12主备流复制操作过程以及原理【pg_basebackup】

原理介绍：流复制（Streaming Replication）。流复制提供了将 WAL 记录连续发送并应用到从服务器以使其保持最新状态的功能。通过流复制，从服务器不断从主服务器同步相应的数据，

同时，从服务器作为主服务器的一个备份。

pg_basebackup：提供一个全量备份。常用来搭建流复制环境。属于物理备份。逻辑备份工具时pg_dump；

-D：–pgdata=DIRECTORRY，接收备份的目录
-F：–format=p | t，指定输出格式，支持p（原样输出）或者t(tar格式输出)
-r：–max-rate=RATE，最大传输率（kB/s，或用前缀 k,M）
-R，–write-recovery-conf，备份后写recovery.conf文件
-s,–slot=SLOTNAME，使用的复制槽
-T：–tablespace-mapping=OLDDIR=NEWDIR，使用NEWDIR替代OLDDIR
-x：–xlog,备份开始后，启动另一个流复制连接从主库接收WAL
-X:–xlog-method=fetch| stream
–xlogdir=XLOGDIR
-z：–gzip
-Z：–compress=0-9
–target-gp-dbid：根据给定的dbid创建表空间子目录
-C,–checkpoint=fast| spread
-l,–label=LABLE：设置backup label
-E，–exclude
–exclude-from=FILE

一、两台服务器上分别安装pg：默认为12版本，路径：/var/lib/postgresql/12

       1、安装命令：

                         sudo apt-get install postgresql 

                  或者

                        sudo apt-get install postgresql-12

 

       2、创建系统账号：

            命令：  sudo su - postgres -c "createuser -s odoo"

                         sudo -u postgres psql

                        alter role odoo with password 'odoo';

            退出方式：最好用\q，这样会将进程结束掉

            Control +Z 退出 或 \q

 

        3、安装完成后各目录说明

             (1) 配置文件config所在目录 /etc/postgresql/12/main

             (2) 数据文件data所在目录   /var/lib/postgresql/12/main

              (3) 端口号               5432

              (4) 安装目录             /usr/lib/postgresql/12/

二、主数据库【10.14.22.143】配置

          1、使用postgres用户登陆数据库，创建复制用户

               #需要一个账号进行主从同步

              1.1、登录： sudo -u postgres psql

             1.2、创建：  postgres=#create role replica login replication encrypted password 'replica';

         

          2、修改认证文件：pg_hba.conf

                添加如下配置：

                         host  all  all  10.14.22..0/16 trust  # 允许连接

                         host replication  replica  10.14.22.0/16 trust # 允许replica用户复制本机数据

                        

         3、配置 postgrsql.conf

                 配置参数：

                        listen_addresses = '*'   #监听所有ip

                        archive_mode = on   #开启归档模式

                        archive_command = 'cp %p /var/lib/postgresql/12/main/%f'   #归档命令

                         wal_level = replica    # 决定多少信息写入WAL，此处为replica模式

                         max_wal_senders = 10   #最大流复制连接，一般和从服务相等

                         wal_sender_timeout = 60s    #流复制超时时间

                         max_connections = 100   #最大连接数，必须不大于从库的配置

                        

             4、重启数据库：

                       命令：

                              sudo service postgresql restart

                       Or

                               systemctl start postgresql

                     查看状态：

                             systemctl status postgresql

                      登录数据库： sudo -u postgres psql

                     其他命令：

                    查看当前目录大小：

                                                    du -sh

                                                     ls -aslsh

二、从数据库【10.14.22.144】配置：

    注意点：Pg13 做主从库与pg10基本一致,在从库的配置文件上有所不同Pg12后,弃用了resovery.conf文件,不用配置;

    另外postgresql.auto.conf文件的优先级高于postgresql.conf文件

 

       1、 进入目录：cd /var/lib/postgresql

               执行basebackup命令

                

-R 表示自动生成recovery.conf文件，若不加，可以自定义该文件：

standby_mode = on  #表示该节点是从库

primary_conninfo = 'host=172.17.0.2  post=5432  user=replicator  password=12345678'

###recovery_target_timelint = 'latest' #说明恢复到最新状态—— 这一行我删除了

               

      2、 将复制的data2 替换掉原来的data目录

修改配置文件 postgresql.conf

                     cd 进入到: /etc/postgresql/12/main/postgresql.conf

             修改参数：

                     wal_level = hot_standby    #热备模式

                     max_connections = 200   #最大连接

                     hot_standby = on #说明这台机器不仅用于数据归档，还可以用于数据查询

                     max_standby_streaming_delay = 30s #流备份的最大延迟时间

                     wal_receiver_status_interval = 10s  #向主机汇报本机状态的间隔时间

                      hot_standby_feedback = on #r出现错误复制，向主机反馈

三、验证配置是否成功

            1、在主库上执行：能看到从库IP  ：sudo -u postgres psql

                 

2、可以在两台服务器上执行 ps aux | grep postgres 来验证部署成功

                  

              3、通过创建数据库来验证：

                    原理是在自主库上创建数据，然后看从库是否存在

                   主库上操作：

                       

                   在从库上查询