1、Mycat的分片

  两台数据库服务器:

  192.168.80.11

  192.168.80.4

  操作系统版本环境:centos6.5

  数据库版本:5.6

  mycat版本:1.4 release

  数据库:db1,db2,db3

  说明:db1.db2 在192.168.80.11 服务器上 ,db3在192.168.80.4服务器上

------------------------------------------------------------------------------------------------------------------------------

  1、schema.xml配置: 

  Schema.xml作为MyCat中重要的配置文件之一,管理着MyCat的逻辑库、表、分片规则、DataNode以及DataSource。弄懂这些配置,是正确使用MyCat的前提。这里就一层层对该文件进行解析。

  schema 标签用于定义MyCat实例中的逻辑库

  Table 标签定义了MyCat中的逻辑表

  dataNode 标签定义了MyCat中的数据节点,也就是我们通常说所的数据分片。

  dataHost标签在mycat逻辑库中也是作为最底层的标签存在,直接定义了具体的数据库实例、读写分离配置和心跳语句。

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
   <!--起一个名字,作为mycat的数据库名-->
   <schema name="mycat001" checkSQLschema="false" sqlMaxLimit="100">
<!--一个表的名字,以id为分片依据,数据节点:d1,d2,d3,rule拆分规定//此处为默认 -->
<table name="mycat_test" primaryKey="id" dataNode="d1,d2,d3" rule="auto-sharding-long" /> </schema>
<!-- <dataNode name="dn1$0-743" dataHost="localhost1" database="db$0-743"
/> -->
   <!--配置数据节点,name和上面的对照,datahost和下面的对照,database为数据节点中的数据库中的真实名字-->
<dataNode name="d1" dataHost="centos_1" database="db1" />
<dataNode name="d2" dataHost="centos_2" database="db2" />
<dataNode name="d3" dataHost="centos_3" database="db3" />
<!--配置datahost的信息,连接数据库的配置,name和上面的对照,因为db1和db2在一台机器上,可以配置一成台datahost-->
<dataHost name="centos_1" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
     <heartbeat>show slave status</heartbeat><!--配置心跳,保持状态-->
<!-- can have multi write hosts --><!--配置服务器ip和数据库端口,用户名和密码-->
<writeHost host="hostM1" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts --><!--上面的writehost是写-->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> <dataHost name="centos_2" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM2" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts -->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> <dataHost name="centos_3" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM3" url="192.168.80.4:3306" user="root" password="123456">
<!-- can have multi read hosts -->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> </mycat:schema>

  2、server.xml配置

  配置用户:name="schemas"和前面配置的schemas.xml中的name对应

<user name="dongrunhua">
<property name="password">123456</property>
<property name="schemas">mycat001</property>
<property name="readOnly">false</property>
</user>

  3、rule.xml配置 

  rule.xml里面就定义了我们对表进行拆分所涉及到的规则定义。我们可以灵活的对表使用不同的分片算法,或者对表使用相同的算法但具体的参数不同。这个文件里面主要有tableRule和function这两个标签。在具体使用过程中可以按照需求添加tableRule

和function。

  此配置文件可以不用修改,使用默认即可。

  4、测试: 

  所建的表,要在schemas.xml中的schemas节点内的tables节点配置

  由于配置的分片规则为“auto-sharding-long”,所以mycat会根据此规则自动分片。

  每个datanode中保存一定数量的数据。根据id进行分片

  经测试id范围为:

  db1:1~5000000

  db2:5000001~10000000

  db3:10000001~15000000

  当15000000以上的id插入时报错:

  [Err] 1064 - can't find any valid datanode :mycat_test -> id -> 15000001

  此时需要添加节点了。

----------------------------------------------------------------------------------------------------------------------------

2、mycat配置读写分离

  数据库读写分离对于大型系统或者访问量很高的互联网应用来说,是必不可少的一个重要功能。对于MySQL来说,标准的读写分离是主从模式,一个写节点Master后面跟着多个读节点,读节点的数量取决于系统的压力,通常是1-3个读节点的配置。

  1、先配置MySQL的主从模式

    说明:此配置为192.168.80.11的db1为主,192.168.80.4的db1为从

  2、配置主服务器

  第一步:配置my.cnf文件

  如果在/etc文件先没有my.cnf这个文件,从/usr/share/mysql 下复制一个过来/etc/, 改一下名字即可 my-default.cnf 然后在[mysqld]下面添加:

#配置数据库
binlog-do-db=db1
binlog-ignore-db=mysql
#启用二进制日志
log-bin=mysql-bin
#服务器唯一ID,一般取IP最后一段
server-id=11

  第二步:重启MySQL服务

  service mysql restart

  第三步:建立一个账户并授权slave ,在这个时候一般不会取用root用户,建立一个专用账号。

  可以设置为%表示所有客户端可以连,只要用户名密码正确,也可以设置一个ip代替,加强安全。

  mysql>GRANT FILE ON *.* TO 'backup'@'%' IDENTIFIED BY '123456';

  mysql>GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* to 'backup'@'%' identified by '123456';

  刷新:FLUSH PRIVILEGES;

  查看有哪些用户:

mysql>select user,host from mysql.user;

  第四步:查看master的状态

  mysql> show master status;

  3、配置从服务器

  第一步:修改my.cnf文件,唯一id

  文件路径和上面一样:然后在[mysqld]段下面添加:server-id=4

  第二步:配置从服务器

  mysql>change master to master_host='192.168.80.11',master_port=3306,master_user='backup',master_password='123456',master_log_file='mysql-bin.000003',master_log_pos=2669

  注意:语句中间不要断开,master_host为主服务器的ip,master_port为端口(无引号),master_user为执行同步操作的数据库账户,在此为刚创建的backup, master_log_file为刚刚file内的值,master_log_pos为刚刚position内的值

  启动从服务器的复制功能:

  mysql>start slave;

  检查从服务器的复制功能:

  mysql>show slave status\G

  查看Slave_IO_Running:yes // 此状态必须为yes

    Slave_SQL_Running:yes // 此状态必须yes

  注:Slave_IO及Slave_SQL进程必须正常运行,即YES状态,否则都是错误的状态(如:其中一个NO均属错误)。

  注意:删除slave

    stop slave; // 停止slave

    reset slave all; // 删除slave

    start slave; // 启动slave

    在mysql主从复制时,在192.168.80.4上建一个db1作为从服务器,名字db1和192.168.80.11上的主服务器名字相同,都为db1

-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

  Mycat配置:

  Mycat 1.4 支持MySQL主从复制状态绑定的读写分离机制,让读更加安全可靠,配置如下:

  配置如下:

<dataHost name="centos_1" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
<heartbeat>show slave status</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM1" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts -->
<readHost host="hostS1" url="192.168.80.4:3306" user="root" password="123456" /> </writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost>

  说明:

  (1)设置 balance="1"与writeType="0"

  Balance参数设置:

    1. balance=“0”, 所有读操作都发送到当前可用的writeHost上。

    2. balance=“1”,所有读操作都随机的发送到readHost。

    3. balance=“2”,所有读操作都随机的在writeHost、readhost上分发

  WriteType参数设置:

    1. writeType=“0”, 所有写操作都发送到可用的writeHost上。

    2. writeType=“1”,所有写操作都随机的发送到readHost。

    3. writeType=“2”,所有写操作都随机的在writeHost、readhost分上发。

   “readHost是从属于writeHost的,即意味着它从那个writeHost获取同步数据,因此,当它所属的writeHost宕机了,则它也不会再参与到读写分离中来,即“不工作了”,这是因为此时,它的数据已经“不可靠”了。基于这个考虑,目前mycat 1.3和1.4版本中,若想支持MySQL一主一从的标准配置,并且在主节点宕机的情况下,从节点还能读取数据,则需要在Mycat里配置为两个writeHost并设置banlance=1。”

  (2)设置 switchType="2" 与slaveThreshold="100"

  switchType 目前有三种选择:

    -1:表示不自动切换

    1 :默认值,自动切换

    2 :基于MySQL主从同步的状态决定是否切换

  “Mycat心跳检查语句配置为 show slave status ,dataHost 上定义两个新属性: switchType="2" 与slaveThreshold="100",此时意味着开启MySQL主从复制状态绑定的读写分离与切换机制。Mycat心跳机制通过检测 show slave status 中的 "Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running" 三个字段来确定当前主从同步的状态以及Seconds_Behind_Master主从复制时延。“

Mycat入门配置_读写分离配置的更多相关文章

  1. MySQL+MyCat分库分表 读写分离配置

    一. MySQL+MyCat分库分表 1 MyCat简介 java编写的数据库中间件 Mycat运行环境需要JDK. Mycat是中间件.运行在代码应用和MySQL数据库之间的应用. 前身 : cor ...

  2. MySQL一主多从配置和读写分离配置

    一.一主多从配置 此次操作实现的是一主两从的方式.主服务器slave2(2.100),从服务器slave2-1(2.107),slave2-2(2.108);第一:准备主数据库    1. 在不同的机 ...

  3. 通过mycat实现mysql的读写分离

    mysql的主从配置沿用上一篇博客的配置:https://www.cnblogs.com/MasterSword/p/9434169.html mycat下载地址:http://www.mycat.i ...

  4. SpringBoot Mybatis 读写分离配置(山东数漫江湖)

    为什么需要读写分离 当项目越来越大和并发越来大的情况下,单个数据库服务器的压力肯定也是越来越大,最终演变成数据库成为性能的瓶颈,而且当数据越来越多时,查询也更加耗费时间,当然数据库数据过大时,可以采用 ...

  5. MySQL5.6 Replication主从复制(读写分离) 配置完整版

    MySQL5.6 Replication主从复制(读写分离) 配置完整版 MySQL5.6主从复制(读写分离)教程 1.MySQL5.6开始主从复制有两种方式: 基于日志(binlog): 基于GTI ...

  6. Mysql一主多从和读写分离配置简记

    近期开发的系统中使用MySQL作为数据库,由于数据涉及到Money,所以不得不慎重.同时,用户对最大访问量也提出了要求.为了避免Mysql成为性能瓶颈并具备很好的容错能力,特此实现主从热备和读写分离. ...

  7. yii2的数据库读写分离配置

    简介 数据库读写分离是在网站遇到性能瓶颈的时候最先考虑优化的步骤,那么yii2是如何做数据库读写分离的呢?本节教程来给大家普及一下yii2的数据库读写分离配置. 两个服务器的数据同步是读写分离的前提条 ...

  8. mysql读写分离配置(整理)

    mysql读写分离配置 环境:centos7.2 mysql5.7 场景描述: 数据库Master主服务器:192.168.206.100 数据库Slave从服务器:192.168.206.200 M ...

  9. laravel学习:主从读写分离配置的实现

    本篇文章给大家带来的内容是关于laravel学习:主从读写分离配置的实现,有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助. 在DB的连接工厂中找到以下代码.../vendor/larav ...

随机推荐

  1. 如何给wp(Windows phone)中搜索关键字加亮?

    问题来源 最近在群里看到群友讨论在wp中有个搜索功能,要求搜索关键字在搜索结果内容中加亮(即加颜色),由于wp中没有自带这样的控件,于是大家各抒自见,有人说用第三方控件,有人说用richtextbox ...

  2. vue.js 的起步

    vue.js 的起步 转载 作者:伯乐在线专栏作者 - 1000copy 点击 → 了解如何加入专栏作者 如需转载,发送「转载」二字查看说明 介绍 vue.js 是一个客户端js库,可以用来开发单页应 ...

  3. postgresql-清空shared_buffers

    清空os缓存,shared_buffers 1.停止数据库 pg_ctl -m fast -D /pgdata stop 2.清空高速缓存前尝试将数据刷新至磁盘 sync 3.清空缓存 echo 3 ...

  4. 在Ubuntu 16.04上利用Jexus+.Net Core+Linux版SQL Server部署ZKEACMS.Core

    百度传课视频地址:https://chuanke.baidu.com/v5849090-223278-1498090.html 一.SQL Server on Linux的安装 官方文档:https: ...

  5. PCA (主成分分析)详解 (写给初学者) 结合matlab(转载)

    一.简介 PCA(Principal Components Analysis)即主成分分析,是图像处理中经常用到的降维方法,大家知道,我们在处理有关数字图像处理方面的问题时,比如经常用的图像的查询问题 ...

  6. Git for Windows之团队合作

    1.先给项目添加一个成员 输入对方码云邮箱账号,添加成功. 2.登陆,将码云上面的项目克隆到本地 (1).设置全局参数  用户名和邮箱用于push和pull代码 (2).克隆目标项目地址 查看本地文件 ...

  7. 在MongoDB中实现聚合函数

    在MongoDB中实现聚合函数 随着组织产生的数据爆炸性增长,从GB到TB,从TB到PB,传统的数据库已经无法通过垂直扩展来管理如此之大数据.传统方法存储和处理数据的成本将会随着数据量增长而显著增加. ...

  8. 记一次cocos项目的加载速度优化

    半个月前,我们用cosos creator做了一个简单的小游戏,也许算不上小游戏吧..一边学cocos,一边做,几经波折后终于上线了.然鹅,功能是实现了,但是加载速度十分感人(毕竟没经验嘛,无辜脸). ...

  9. vue框架之自定义组件中使用v-model

    通常 vue在html常见表单空间支持v-model双向绑定例如 <input v-model="message" placeholder="edit me&quo ...

  10. webkit技术内幕读书笔记 (二、三)

    可视区和网页 通常网页比屏幕的可视区面积要大,因此当网页内容在可视区中放不下时,一般浏览器会提供滚动条. 从URL到构建完DOM树的过程 当用户输入网页URL的时候,WebKit调用其资源加载器加载该 ...