第九章 MySQL 高可用(MHA)

MySQL 高可用(MHA)

一 MHA高可用部署

需要使用的前提：

　　当普通主从复制不能满足我们的需求，  主节点宕机  影响业务的不间断运行。这里就需要用到MHA 高可用

1. MHA高可用的介绍　　

　　　不支持多实例， 必须是单独的物理机
　　　manager 程序负责监控已知Node 节点（1主2从接点）

2. 当主机意外宕机

① mysql实例故障（SSH能够连接到主机）

1 监控到主库宕机，选择一个新主（取消从库角色，reset slave），选择标准：数据较新的从库会被选择为新主(show slave status\G)
2 从库通过MHA自带脚本程序，立即保存缺失部分的binlog
3 二号从库会重新与新主构建主从关系，继续提供服务
4 如果VIP机制，将vip从原主库漂移到新主，让应用程序无感知

② 主节点服务器宕机（SSH已经连接不上了）

1 监控到主库宕机，尝试SSH连接，尝试失败
2 选择一个数据较新的从库成为新主库（取消从库角色 reset slave），判断细节：show slave status\G
3 计算从库之间的relay-log的差异，补偿到2号从库
3 二号从库会重新与新主构建主从关系，继续提供服务
5 如果VIP机制，将vip从原主库漂移到新主，让应用程序无感知
6 如果有binlog server机制，会继续讲binlog server中的记录的缺失部分的事务，补偿到新的主库

3. 安装前 服务器检查

1） 3台mysql 必须是独立节点  主机名  ip 防火墙关闭等

2） 开启 1主2从GTID复制结构

3） 关闭 各个节点relay-log 自动删除功能

[mysqld]
relay_log_purge=0

mysql>  set global relay_log_purge=0;

退出重登  查看

mysql>  show  variables  like "%relay_log_purge%";
+-----------------+-------+
| Variable_name   | Value |
+-----------------+-------+
| relay_log_purge | OFF   |
+-----------------+-------+

4.  安装 mha node

1） 3个节点安装 node 软件

rpm -ivh mha4mysql-node-0.56-0.el6.noarch.rpm

2）主库中创建mha管理用户

grant all privileges on *.* to mha@'10.0.0.%' identified by 'mha';

3）配置软连接（3个节点）

ln -s /data/mysql/bin/mysqlbinlog /usr/bin/mysqlbinlog
ln -s /data/mysql/bin/mysql /usr/bin/mysql

4） 部署 manger节点 （建议在从节点db03）

wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-6.repo
yum install -y perl-Config-Tiny epel-release perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes

5） 安装  manager软件

rpm -ivh mha4mysql-manager-0.56-0.el6.noarch.rpm 

5. 生成MHA的目录与配置文件

1） 创建Manager必须目录

[root@db3 ~]# mkdir -p /etc/mha
[root@db3 ~]# mkdir -p /var/log/mha/app1

2）创建Manager配置文件

[server default]
manager_log=/var/log/mha/app1/manager
manager_workdir=/var/log/mha/app1
master_binlog_dir=/data/binlog
user=mha
password=mha
ping_interval=2
repl_password=123456
repl_user=repl
ssh_user=root

[server1]
hostname=10.0.0.51
port=3306

[server2]
hostname=10.0.0.52
port=3306

[server3]
hostname=10.0.0.53
port=3306

6. 配置互信节点 （每个节点都做）

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa >/dev/null 2>&1

ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.51
ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.52
ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.53

7. 检测互信

[root@db3 ~]# masterha_check_ssh  --conf=/etc/mha/app1.cnf

8. 检测主从

[root@db3 ~]# masterha_check_repl  --conf=/etc/mha/app1.cnf

9. 启动MHA manager

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

10. 查看日志

[root@db3 app1]# tailf manager
10.0.0.51(10.0.0.51:3306) (current master)
 +--10.0.0.52(10.0.0.52:3306)
 +--10.0.0.53(10.0.0.53:3306)

Fri Sep 20 15:14:59 2019 - [warning] master_ip_failover_script is not defined.
Fri Sep 20 15:14:59 2019 - [warning] shutdown_script is not defined.
Fri Sep 20 15:14:59 2019 - [info] Set master ping interval 2 seconds.
Fri Sep 20 15:14:59 2019 - [warning] secondary_check_script is not defined. It is highly recommended setting it to check master reachability from two or more routes.
Fri Sep 20 15:14:59 2019 - [info] Starting ping health check on 10.0.0.51(10.0.0.51:3306)..
Fri Sep 20 15:14:59 2019 - [info] Ping(SELECT) succeeded, waiting until MySQL doesn't respond..

---

二 故障练习

1.停掉DB1

　　观察 tail -f /var/log/mha/app1/manager

2. 启动DB1 添加到主从复制环境中

1） DB1 操作

mysql > CHANGE MASTER TO MASTER_HOST='10.0.0.52', MASTER_PORT=3306, MASTER_AUTO_POSITION=1, MASTER_USER='repl', MASTER_PASSWORD='123456';

mysql >  start slave;

mysql >  show  start status\G;

2) 修改配置文件 加入故障节点

vim  /etc/mha/app1.cnf

3） 启动MHA了manager程序

masterha_check_ssh --conf=/etc/mha/app1.cnf

masterha_check_repl --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

4） 探测命令（manager端）

masterha_check_status  --conf=/etc/mha/app1.cnf

需要注意是： 当有一台宕机，切换主库  manager会自动退出

---

三. vip 设置

1. Perl 脚本文件 master_ip_failover

#!/usr/bin/env perl

use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
    $command,          $ssh_user,        $orig_master_host, $orig_master_ip,
    $orig_master_port, $new_master_host, $new_master_ip,    $new_master_port
);

my $vip = '10.0.0.55/24';
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig eth0:$key $vip";
my $ssh_stop_vip = "/sbin/ifconfig eth0:$key down";

GetOptions(
    'command=s'          => \$command,
    'ssh_user=s'         => \$ssh_user,
    'orig_master_host=s' => \$orig_master_host,
    'orig_master_ip=s'   => \$orig_master_ip,
    'orig_master_port=i' => \$orig_master_port,
    'new_master_host=s'  => \$new_master_host,
    'new_master_ip=s'    => \$new_master_ip,
    'new_master_port=i'  => \$new_master_port,
);

exit &main();

sub main {

    print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";

    if ( $command eq "stop" || $command eq "stopssh" ) {

        my $exit_code = 1;
        eval {
            print "Disabling the VIP on old master: $orig_master_host \n";
            &stop_vip();
            $exit_code = 0;
        };
        if ($@) {
            warn "Got Error: $@\n";
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "start" ) {

        my $exit_code = 10;
        eval {
            print "Enabling the VIP - $vip on the new master - $new_master_host \n";
            &start_vip();
            $exit_code = 0;
        };
        if ($@) {
            warn $@;
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "status" ) {
        print "Checking the Status of the script.. OK \n";
        exit 0;
    }
    else {
        &usage();
        exit 1;
    }
}

sub start_vip() {
    `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
sub stop_vip() {
     return 0  unless  ($ssh_user);
    `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}

sub usage {
    print
    "Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

master_ip_failover

需要注意的是一定要给执行权限

chmod +x  /usr/local/bin/master_ip_failover

2. 脚本文件格式转换

[root@db3 bin]# dos2unix /usr/local/bin/master_ip_failover

3.修改 manager端 配置文件

vim /etc/mha/app1.cnf

添加：
master_ip_failover_script=/usr/local/bin/master_ip_failover

4. 重启 mha

#停 命令

masterha_stop --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

需要注意是：

先手动再主库上绑定vip  需要和脚本文件 master_ip_failover 里面的配置一样

eth0:1(1是key指定的值)

ifconfig eth0:1 10.0.0.55/24

5.开始测试

看是否会漂移

---