主从简介

在现代企业中,数据显得尤为重要,而存储数据的数据库选择又五花八门,但无论是何种数据库,均存在着一种隐患。

当数据规模非常大,读写量也很高时,一台数据库已经无法负担全部读写任务,就需要多台数据库同时运作分担负载。

主从作用

  • 实时灾备,用于故障切换
  • 读写分离,提供查询服务
  • 备份,避免影响业务

主从形式

  • 一主一从
  • 主主复制
  • 一主多从(扩展系统读取的性能,读在从库,写在主库)
  • 多主一从(5.7开始支持)
  • 联级复制

主从复制原理

主从复制步骤:

  1. 主库将所有的写操作记录到binlog日志中并生成一个log dump线程,将binlog日志传给从库的I/O线程
  2. 从库生成两个线程,一个I/O线程,一个SQL线程
  3. I/O线程去请求主库的binlog,并将得到的binlog日志写到relay log(中继日志) 文件中
  4. SQL线程,会读取relay log文件中的日志,并解析成具体操作,来实现主从的操作一致,达到最终数据一致的目的

传统主从弊端

互为主从时,可能会由于循环写导致数据失去一致性。

主从配置

需求:

搭建两台MySQL服务器,一台作为主服务器,一台作为从服务器,主服务器进行写操作,从服务器进行读操作

环境:

  • 主数据库

    • CentOS7/RedHat7
    • IP-192.168.233.129
    • Hostname-Lynk
    • 有数据
  • 副数据库
    • CentOS7/RedHat7
    • IP-192.168.233.247
    • Hostname-Hyrule
    • 无数据

主从复制配置步骤:

  1. 确保从数据库与主数据库里的数据一样
  2. 在主数据库里创建一个同步账号授权给从数据库使用
  3. 配置主数据库(修改配置文件)
  4. 配置从数据库(修改配置文件)

安装数据库

详情请参考Mysql安装

给从库授权

#以下操作在主库进行
mysql> CREATE USER 'repl'@'192.168.233.247' IDENTIFIED BY 'repl123';
Query OK, 0 rows affected (0.00 sec) mysql> GRANT REPLICATION SLAVE ON *.* TO 'repl'@'192.168.233.247';
Query OK, 0 rows affected (0.00 sec)

确保数据一致

#新开一个终端,对主库锁表,防止配置期间有其他人写入,锁表期间不能关闭终端或退出mysql交互式命令行
mysql> FLUSH TABLES WITH READ LOCK; #全备主库
[root@lynk ~]# mysqldump -uroot -plynk123~ --all-databases > /opt/all-201902271419.sql
#复制备份文件到从库
[root@lynk ~]# scp /opt/all-201902271419.sql root@192.168.233.247:/opt/ #在从库恢复主库的备份
[root@Hyrule ~]# mysql -uroot -plynk123~ < /opt/all-201902271419.sql

配置主库

[root@lynk ~]# vim /etc/my.cnf
#在[mysqld]后添加如下内容(已有的内容不要改变)
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
#启用binlog日志
log-bin=mysql-bin
#数据库服务器唯一标识符,主库的server-id值必须比从库的大
server-id=1
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid #结束主库锁表状态,只要退出另一个终端中mysql交互式命令行就行了
mysql> quit #重启mysql服务
[root@lynk ~]# systemctl restart mysqld #查看主库状态
[root@lynk ~]# mysql -uroot -plynk123~ -e 'show master status;'
mysql: [Warning] Using a password on the command line interface can be insecure.
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 | 23912 | | | |
+------------------+----------+--------------+------------------+-------------------+

配置从库

[root@Hyrule ~]# vim /etc/my.cnf
#添加如下内容
server-id=2
relay-log=mysql-relay-bin #重启从库
[root@Hyrule ~]# systemctl restart mysqld #配置主从复制
mysql> CHANGE MASTER TO
-> MASTER_HOST='192.168.233.129',
-> MASTER_USER='repl',
-> MASTER_PASSWORD='repl123',
-> MASTER_LOG_FILE='mysql-bin.000001',
-> MASTER_LOG_POS=23912;
Query OK, 0 rows affected, 2 warnings (0.04 sec) mysql> start slave;
Query OK, 0 rows affected (0.02 sec) mysql> show slave status \G
#确保以下两项是Yes
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

测试验证

#在主库中新建一个库或表,在从库中查看是否有主库中新建的表

主从监控

zabbix可以满足很多监控需求,其自定义监控尤其强大,主从监控就是通过配置zabbix自定义监控实现的。

请先部署zabbix,可以参考zabbix简介与部署

#在从库添加一个mysql用户密码配置文件
[root@Hyrule ~]# vim /root/.my.cnf
[client]
user=root
password=mysql登录密码 [root@Hyrule ~]# chmod 755 /root

在客户端进行如下操作:

[root@localhost Hyrule]# vim /usr/local/etc/zabbix_agentd.conf
#修改UnsafeUserParameters=1
#在最后添加UserParameter=<key>,<shell command>,如
UserParameter=check_delay,/scripts/mysql_delay.sh
UserParameter=check_status,/scripts/mysql_status.sh #重启客户端
[root@Hyrule001 ~]# pkill zabbix
[root@Hyrule001 ~]# zabbix_agentd #编写监控延迟的脚本
[root@Hyrule ~]# mkdir /scripts
[root@Hyrule ~]# vim /scripts/mysql_delay.sh
#!/bin/bash master_log_pos=$(mysql -e 'show slave status \G;'|egrep "Read_Master_Log_Pos"|awk '{print $NF}')
exec_log_pos=$(mysql -e 'show slave status \G;'|egrep "Exec_Master_Log_Pos"|awk '{print $NF}') echo "$[$master_log_pos-$exec_log_pos]" [root@Hyrule001 Hyrule]# chown zabbix.zabbix /scripts/mysql_delay.sh
[root@Hyrule001 Hyrule]# chmod 777 /scripts/mysql_delay.sh
#编写监控运行状态的脚本
[root@Hyrule ~]# vim /scripts/mysql_status.sh
#!/bin/bash IO_status=$(mysql -e 'show slave status \G;'|egrep "Slave_IO_Running"|awk '{print $NF}'|grep "Yes"|wc -l)
SQL_status=$(mysql -e 'show slave status \G;'|egrep "Slave_SQL_Running"|awk '{print $NF}'|grep "Yes"|wc -l) if [ $[$IO_status+$SQL_status] -eq 2 ];
then
echo 0
else
echo 1
fi [root@Hyrule001 Hyrule]# chown zabbix.zabbix /scripts/mysql_status.sh
[root@Hyrule001 Hyrule]# chmod 777 /scripts/mysql_status.sh

添加监控项、触发器和报警媒介









配置报警媒介详见zabbix监控配置与邮件告警的邮件告警章节

mysql传统主从配置与主从监控的更多相关文章

  1. redis主从配置及主从切换 转

    redis主从配置及主从切换 转自 http://blog.sina.com.cn/s/blog_67196ddc0101h8v0.html (2014-04-28 17:48:47) 转载▼   分 ...

  2. [转]redis主从配置及主从切换

    http://blog.csdn.net/zfl092005/article/details/17523945 环境描述: 主Redis:192.168.10.1 6379 从redis:192.16 ...

  3. redis主从配置及主从切换

    环境描述: 主redis:192.168.10.1 6379从redis:192.168.10.2 6380 一.主从配置 1.将主从redis配置文件redis.conf中的aemonize no ...

  4. Redis主从配置和哨兵监控配置——服务器端环境搭建

    一:介绍 公司用到的redis框架,主要分为cluster的缓存集群和sentinel中的哨兵主从.这种的选用方式一般需要更具业务场景来做区分,两种框架的配置图为:右图为哨兵主从框架和cliuster ...

  5. spring集成redis——主从配置以及哨兵监控

    Redis主从模式配置: Redis的主从模式配置是非常简单的,首先我们需要有2个可运行的redis环境: master node : 192.168.56.101 8887 slave node: ...

  6. Nginx+Keepalived主从配置(双机主从热备)+Tomcat集群

    拓扑环境 以下表格是这次測试须要的拓扑环境,几台server.每台server上安装什么,都有介绍. server名称 系统版本号 预装软件 IP地址/VIP Nginx主server CentOS ...

  7. redis 主从配置,主从切换

    只需修改从配置文件 # slaveof <masterip> <masterport> slaveof 127.0.0.1 6379 # masterauth <mast ...

  8. linux中MySQL主从配置(Django实现主从读写分离)

    一 linux中MySQL主从配置原理(主从分离,主从同步) mysql主从配置的流程大体如图: 1)master会将变动记录到二进制日志里面: 2)master有一个I/O线程将二进制日志发送到sl ...

  9. MySQL主从配置及haproxy和keepalived搭建

    本篇文章主要介绍如何搭建MySQL主主配置.主从配置.haproxy.keepalived,已经搭建过程中的一些问题.本次运行环境是在docker中,也会介绍一些docker的知识 docker 小知 ...

随机推荐

  1. SpringMVC参数注解解释

    在Controller的开发中,经常会用到很多注解,下面解释一下关于形参常用注解的一些解释,他们主要是用来接收参数的. @ModelAttribute("vo", ObjectVo ...

  2. win10 .net3.5的问题及解决方案

    近日有网友反映在windows10_64位系统电脑上安装Net framework3.5,操作时总失败,怎么办呢?小编下面就介绍win10 64位系统无法安装Net framework3.5的两种解决 ...

  3. 基于SpringBoot+Mybatis+AntDesign快速开发平台,Jeecg-Boot 1.1 版本发布

    Jeecg-Boot 1.1 版本发布,初成长稳定版本 导读     平台首页UI升级,精美的首页支持多模式 提供4套代码生成器模板(支持单表.一对多) 集成Excel简易工具类,支持单表.一对多导入 ...

  4. 使用events.EventEmitter 控制Node.js 程序执行流程

    使用events.EventEmitter 控制Node.js 程序执行流程 标题写的可能也不太对,大家领会精神: Node.js 是一个基于Chrome JavaScript 运行时建立的一个平台. ...

  5. win10以管理员身份运行cmd方法

    win10以管理员身份运行cmd方法 win8win10以管理员身份运行cmd方法1.直接到 C:\Windows\System32 下面找cmd.exe 右键以管理员方式打开就可以了 2.按WIN+ ...

  6. 数据库sql使用小结

    1.更新数据库中表的字段的时候,如果更新的表本身含有最细粒度的字段,那么可以以最细粒度作为判断条件,一次性更新多个字段: 2.如果更新的表中本身不含有最细粒度字段,那么要更新多个字段时有两种思路: a ...

  7. 微软Microsoft SQL server 之 MDS connection问题

    微软的MDS和DQS使用面大概还不太广的两个新产品,之前有说道DQS的system.web的register的问题,MDS的问题就经常会碰到链接的问题,当你的用户在Excel中经常都会发生以下问题的时 ...

  8. SQL Server死锁诊断--同一行数据在不同索引操作下引起的死锁

    死锁概述 对于数据库中出现的死锁,通俗地解释就是:不同Session(会话)持有一部分资源,并且同时相互排他性地申请对方持有的资源,然后双方都得不到自己想要的资源,从而造成的一种僵持的现象.当然,在任 ...

  9. 利用ajax与input 上传与下载文件

    html 部分代码<form action="" method="" class="form form-horizontal" nov ...

  10. jar 接收utf-8字符乱码现象

    1.今天用php去调用jar出现乱码现象 需要对传递的中文字符进行编码之后再传递这里我用的是urlencode编码,让后java再解码就正常了 这里贴一下代码: <?phpexec(" ...