MySQL读写分离-架构

简介

对于很多大型网站(pv值百万、千万)来说,在所处理的业务中,其中有70%的业务是查询(select)相关的业务操作(新闻网站,插入一条新闻。查询操作),剩下的则是写(insert、update、delete,只要能对MySQL的数据造成更改的操作都叫写操作)操作。在使用负载均衡集群之后,可以很大程度的提升网站的整体性能,但是最终的数据处理的压力还是会落到MySQL数据库上,所有很有必要使用一些技术来提升MySQL的负载能力。(读写分离)

写专门交给写服务器处理(一般网站来说写是比较少的 读写比 4:1) 那么需要把读的任务分配多台服务器来完成的架构,就叫做读写分离。

实现方式

第一种:php程序上自己做逻辑判断,写php代码的时候,自己在程序上做逻辑判读写匹配。select,insert、update、delete做正则匹配,根据结果选择写服务器(主服务器)。如果是select操作则选择读服务器(从服务器器) mysql_connect('读写的区分')

第二种:MySQL- Proxy是实现"读写分离(Read/Write Splitting)"的一个软件(MySQL官方提供 ,也叫中间件),基本的原理是让主数据库处理写操作(insert、update、delete),而从数据库处理查询操作(select)。而数据库的一致性则通过主从复制来实现。所以说主从复制是读写分离的基础。

注意:MySQL-proxy它能实现读写语句的区分主要依靠的是内部一个lua脚本(能实现读写语句的判断)。

注意:如果只在主服务器(写服务器)上完成数据的写操作话;这个时候从服务器上没有执行写操作,是没有数据的。这个时候需要使用另外一个技术来实现主从服务器的数据一致性,这个技术叫做 主从复制技术。所以说主从复制是读写分离的基础。

 

也可以从官方下载。

下载地址:http://mirrors.sohu.com/mysql/MySQL-Proxy/

 

如何查看Linux下c库的版本?

注意通用二进制包需要c库版本一致,或者操作系统的c库比安装包高

# uname -a (unix name --all)

拓扑结构-架构图

一主两从

 

MySQL-proxy 负载均衡的软件(读写分离实现)

 

使用三台服务器搭建环境

  1. 一台主(写)服务器
    1. 192.168.57.92
    2. 这台主服务器还运行一个读写分离的软件 mysql-proxy
  2. 二台从(读)服务器
    1. 192.168.57.26
    2. 192.168.57.37

     

    注意事项

  3. 防火墙的关闭

     

  4. selinux关闭

    selinux永久关闭

  5. root账户必须有远程登录的权限

  6. MySQL的版本需要为 5.5 及以上

    主从复制搭建

  7. 先配置主服务器
  8. 然后在配置从服务器

     

    主服务操作

    1. 主服务上的配置

  9. 在主服务上添加一个授权的账户,使得到时候从服务器可以使用该账号来完成数据的获取

    # GRANT REPLICATION SLAVE ON *.* TO repuser@"192.168.%.%" IDENTIFIED BY 'admin88';

    添加了一个 repuser的用户,密码为admin88 可以在 192.168.这个网段完成数据的复制。

    查看

     

  10. 在主服务器上使用 show master status 查看主服务上现在正在使用的bin日志文件和记录的位置。(bin日志文件默认在MySQL的data目录)

     

     

    从服务器的配置

  11. 修改从服务器的配置文件

  12. 使用在主服务器上的授权账号去连接主服务器,等待主服务器的数据的写入后,通知获取

    # CHANGE MASTER TO

    MASTER_HOST='192.168.57.92', MASTER_USER='repuser',

    MASTER_PASSWORD='admin88',

    MASTER_LOG_FILE='master-bin.000002',

    MASTER_LOG_POS=107;

    使用上面的语句连接主服务器后,使用

    # show slave status\G

  13. 开启从服务器

    命令:

  14. stop slave 可以停止 从服务器
  15. reset slave 清空从服务器的规则
  16. start slave 启动从服务器
  17. show slave status 查看从服务器状态
  18. show master status 查看主服务器状态

     

     

    读写分离搭建

    mac的前世今生

    https://yunpan.cn/cY4gQ6sXWaTXd 访问密码 7a0b

     

    下载mysql-proxy

    http://mirrors.sohu.com/mysql/MySQL-Proxy/

     

  19. mysql-proxy上传

  20. 解压操作

    #tar -zxvf mysql-proxy-0.8.4-linux-rhel5-x86-32bit.tar.gz -C /usr/local/

  21. 为mysql-proxy创建一个符号链接

     

  22. 添加一个mysql-proxy用户

    # useradd mysql-proxy

     

  23. 命令查看

     

    6. 在下面路径创建一个admin.lua脚本

    参照

     

    7. 服务启动

    #

    ./mysql-proxy --daemon --log-level=debug

    --log-file=/var/log/mysql-proxy.log

    --plugins='proxy'

    读写分离脚本

    --proxy-lua-script='/usr/local/mysql-proxy/share/doc/mysql-proxy/rw-splitting.lua'

    写服务器

    --proxy-backend-addresses='192.168.57.92:3306'

    读服务器

    --proxy-read-only-backend-addresses='192.168.57.29:3306'

    --proxy-read-only-backend-addresses='192.168.57.37:3306'

    --plugins='admin'

    --admin-username='admin'

    --admin-password='admin88' --admin-lua-script='/usr/local/mysql-proxy/share/doc/mysql-proxy/admin.lua'

     

    相关参数

    MySQL读写分离的监控

    mysql-proxy提供一个端口用来监控MySQL读写的实现

    使用的默认端口是 4041

    1. 使用下面的命令连接mysql-proxy的4041端口

    # mysql -uadmin -padmin88 -h 192.168.57.92 --port 4041

  24. 使用下面的命令查看读写服务器的状态

    # select * from backends;

  25. 如果效果不明显,可以修改下面的文件参数

     

     

MySQL读写分离-架构的更多相关文章

  1. 高可用Mysql架构_Mysql主从复制、Mysql双主热备、Mysql双主双从、Mysql读写分离(Mycat中间件)、Mysql分库分表架构(Mycat中间件)的演变

    [Mysql主从复制]解决的问题数据分布:比如一共150台机器,分别往电信.网通.移动各放50台,这样无论在哪个网络访问都很快.其次按照地域,比如国内国外,北方南方,这样地域性访问解决了.负载均衡:M ...

  2. [记录]MySQL读写分离(Atlas和MySQL-proxy)

    MySQL读写分离(Atlas和MySQL-proxy) 一.阿里云使用Atlas从外网访问MySQL(RDS) (同样的方式修改配置文件可以实现代理也可以实现读写分离,具体看使用场景) 1.在跳板机 ...

  3. mysql读写分离 主从同步

    MySQL主从复制与读写分离的实现 转载 2013年01月17日 18:20:12   MySQL主从复制与读写分离 MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy) ...

  4. mysql读写分离实战

    一个完整的MySQL读写分离环境包括以下几个部分: 应用程序client database proxy database集群 在本次实战中,应用程序client基于c3p0连接后端的database ...

  5. 使用Amoeba实现mysql读写分离机制

    Amoeba的实用指南 http://docs.hexnova.com/amoeba/ 如何实现mysql读写分离 : 通常来说有两种方式: 1,应用程序层实现 2,中间件层实现 应用层实现 应用层实 ...

  6. 分库分布的几件小事(五)MYSQL读写分离

    1.为什么进行读写分离 这个,高并发这个阶段,那肯定是需要做读写分离的,啥意思?因为实际上大部分的互联网公司,一些网站,或者是app,其实都是读多写少.所以针对这个情况,就是写一个主库,但是主库挂多个 ...

  7. mysql读写分离--一主多从,冗余存储

    转载了https://blog.csdn.net/u013421629/article/details/78793966 https://blog.csdn.net/justdb/article/de ...

  8. mysql读写分离(PHP类)

    mysql读写分离(PHP类) 博客分类: php mysql   自己实现了php的读写分离,并且不用修改程序 优点:实现了读写分离,不依赖服务器硬件配置,并且都是可以配置read服务器,无限扩展 ...

  9. amoeba实现MySQL读写分离

    amoeba实现MySQL读写分离 准备环境:主机A和主机B作主从配置,IP地址为192.168.131.129和192.168.131.130,主机C作为中间件,也就是作为代理服务器,IP地址为19 ...

随机推荐

  1. activiti并发多实例子流程任务处理

    一直在搞工作流(activiti),总结一下关于工作流(activiti)中同时并发处理多个子流程的操作方法. 先说下我要实现的业务: 1.办公室发通知(在系统申报页面上,勾选科室,被选中的科室执行第 ...

  2. Python 基础学习篇

    注:技术尚浅,时间匆忙,如有错误或者不当之处值得商榷的,请留言,吾必思而改之. 第一篇 :Python基础- 安装/变量/输入/及循环语句使用 第二篇:  Python基础- 常用数据类型 第三篇: ...

  3. Oracle 学习----:Oracle删除表时报错:表或视图不存在

    表明明存在,但是删除时却报错:表或视图不存在. 可能的原因之一是表名包含了小写,可以用双引号包含表名通过drop命令来删除, 如下所示: drop table "tmp_ST" ; ...

  4. c++知识点总结-模板特化

    类模板的全特化与偏特化 类模板 template<typename T1, typename T2> class Test { public: Test(T1 i,T2 j):a(i),b ...

  5. html页面分块加载

    方法:jQuery ajax - load() 方法 这个方法可以请求html页面,并把结果放在指定元素内.

  6. Linq学习(一)

    与LINQ有关的语言特性 1.隐式类型 var 2.匿名类型 如:var obj = new {Guid.Empty, myTitle = "匿名类型", myOtherParam ...

  7. Java进行身份证格式强校验(准)

    最近做了一个系统,涉及到对用户输入的身份证号进行校验,减少脏数据传入后台处理并降低企业验证成本,因此在接入层便对输入信息做格式强校验. 直接附上代码,可直接使用. package hope.ident ...

  8. 【bzoj1179】[Apio2009]Atm Tarjan缩点+Spfa最长路

    题目描述 输入 第一行包含两个整数N.M.N表示路口的个数,M表示道路条数.接下来M行,每行两个整数,这两个整数都在1到N之间,第i+1行的两个整数表示第i条道路的起点和终点的路口编号.接下来N行,每 ...

  9. 【距离GDOI:130天】 AC自动机ing

    弄完后缀数组,终于能安心来复习AC自动机了..其实当时学的很不好,非常不好..模版都是有问题的...今天花了第一节晚修和一节自习算是把AC自动机的基础弄好了...切掉3道基础题,然后就被某道坑爹题坑掉 ...

  10. POJ 3090 Visible Lattice Points | 其实是欧拉函数

    题目: 给一个n,n的网格,点可以遮挡视线,问从0,0看能看到多少点 题解: 根据对称性,我们可以把网格按y=x为对称轴划分成两半,求一半的就可以了,可以想到的是应该每种斜率只能看到一个点 因为斜率表 ...