详细点的Mysql主从同步

.说明

此操作文档，如果在master机器已开启bin-log及设定好server-id的情况下，可以不锁表，不停机的实现master-slave同步。这一同步可以将master上已有数据同步到slave中，且如果slave出错，或是新增slave，同样可以参照此文档操作。

此文档基于master版本5.7.24，解压安装，非root帐号运行启停。Slave使用容器运行，镜像地址：harbor.xxxx.com.cn/3rd_part/mysql:5.7.24，运行帐号为非root帐号。

.Mysql Master服务器

一，登陆mysql master服务器

ssh dbqry@master

二，查看my.cnf文件配置

/mysql/my.cnf文件

[client]

port=3306

socket=/mysql/mysql.sock

[mysqld]

port=3306

user=mysql

basedir=/mysql/mysql

datadir=/mysql/data

pid-file=/mysql/mysql.pid

socket=/mysql/mysql.sock

log_error=/mysql/error.log

server-id=100

max_allowed_packet = 500M

max_connections=10000

log-bin=mysql-bin

binlog-format=mixed

character-set-server=utf8

sql_mode=NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION

确认此配置已经过重启。（如果不重启，后面的操作都不能继续）

三，使用root登陆mysql，确认已为django用户赋权。

GRANT ALL ON TestDB.* TO ' rep-user '@'%'; 

flush privileges;

四，使用root登陆mysql，重置log-bin文件

【以防意外，先备份！！！】

reset master

五，备份TestDB数据库

mysqldump -u root -p  TestDB --single-transaction --master-data=2 --default-character-set utf8 --no-autocommit>TestDB.sql

增加--single-transaction --master-data=2是为了能准备记录log-bin开始的文件号和偏移量。

六，将这两个文件cp到mysql slave机器。

.Mysql slave服务器

一，前置准备

删除已有的mysql服务，确认slave机器上没有任何mysql服务和数据。

二，新增docker运行所需文件夹

mkdir /docker/mysql-docker

mkdir /docker/mysql-docker/data

mkdir /docker/mysql-docker/conf

mkdir /docker/mysql-docker/log

mkdir /docker/mysql-docker/back

用于存储mysql的数据，配置，日志及备份

三，新增slave的配置文件

/docker/mysql-docker/conf/mysql_prism.cnf

[client]

port = 3306

#socket=/docker/mysql/mysql.sock

[mysqld]

port=3306

default-time_zone = '+8:00'

#user = mysql

#basedir = /docker/mysql/mysql

#datadir = /docker/mysql/data

#pid-file = /docker/mysql/mysql.pid

#socket = /docker/mysql/mysql.sock

log_error = /var/log/mysql/error.log

server-id = 999

relay-log = mysql-relay

# replicate-do-db = TestDB

character-set-server = utf8

max_allowed_packet = 500M

max_connections = 10000

sql_mode = STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION

server-id 999大于master上的server-id(100)。

四，新增slave上的docker启动脚本

/docker/mysql-docker/start_mysql.sh

#!/bin/sh

mysql_dir=/docker/mysql-docker

docker run -p 3306:3306

-v "${mysql_dir}/data":/var/lib/mysql

-v "${mysql_dir}/conf":/etc/mysql/conf.d

-v "${mysql_dir}/back":/back

-v "${mysql_dir}/log":/var/log/mysql

--user 1234:1234

--name mysql-slave

-e MYSQL_ROOT_PASSWORD=xxxxxx

-d harbor.xxxx.com.cn/3rd_part/mysql:5.7.24

其中--user 1234:1234对应于宿主机的非root用户和组启动mysql。

之后，登陆进docker，更改mysql的root密码。

docker exec -it mysql-slave mysql -u root –p

五，在slave上新建用户及数据库

CREATE USER 'rep-user'@'%' IDENTIFIED BY 'xxxxxxx';

create database TestDB default character set utf8 collate utf8_general_ci;

GRANT ALL ON TestDB.* TO 'rep-user'@'%'; 

flush privileges; 

六，导入备份的数据库数据

mysql -udjango -p TestDB < /back/ TestDB.sql

七，获取TestDB.sql文件里的bin-log编号和位移

head -n 30 TestDB.sql

输出类似如下：

-- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000003', MASTER_LOG_POS=154;

八，写入需要同步的master地址等信息

change master to

master_host='master_ip',

master_user='rep-user',

master_password='xxxxxx',

master_log_file='mysql-bin.000003',

master_log_pos=154;

上面的master_log_file和master_log_pos对应于前一步骤的数据。

九，启动主从同步

start slave

十，查看同步状态及排错，验证

1，查看同步状态命令

show slave status\G,

2，排错

查看日志及stop slave或reset slave

3，验证

create table demo(

id INT NOT NULL AUTO_INCREMENT,

name VARCHAR(100) NOT NULL,

PRIMARY KEY ( id )

);

insert into demo (name) values ('cheng');