使用replicate_do_db和replicate_ignore_db时有一个隐患,跨库更新时会出错. 如设置 replicate_do_db=testuse mysql;update test.table1 set ......第二句将不会被执行 如设置 replicate_ignore_db=mysqluse mysql;update test.table1 set ......第二句会被忽略执行 原因是设置replicate_do_db或replicate_ignore_db后,MyS

转自 http://blog.csdn.net/m582445672/article/details/7731565 实践: http://shiyanjun.cn/archives/584.html 操作系统环境:CentOS5.5 1.MySQL 主从流程图 2.MySQL 主从说明 a.主服务器一定要开启二进制日志文件. b.MySQL使用3个线程来执行复制功能(其中1个在主服务器上,另两个在从服务器上.当发出START SLAVE时,从服务器创建一个I/O线程,以连接主服务器并让它发送记

数据库读写分离对于大型系统或者访问量很高的互联网应用来说,是必不可少的一个重要功能. 从数据库的角度来说,对于大多数应用来说,从集中到分布,最基本的一个需求不是数据存储的瓶颈,而是在于计算的瓶颈,即SQL查询的瓶颈,我们知道,正常情况下,Insert SQL就是几十个毫秒的时间内写入完成,而系统中的大多数Select SQL则要几秒到几分钟才能有结果,很多复杂的SQL,其消耗服务器CPU的能力超强,不亚于死循环的威力.在没有读写分离的系统上,很可能高峰时段的一些复杂SQL查询就导致数据库服务器C

MySQL 5.5 主从复制的原理.过程   分为同步复制和异步复制,实际复制架构中大部分为异步复制.复制的基本过程如下:  1).Slave上面的IO进程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容:   2).Master接收到来自Slave的IO进程的请求后,通过负责复制的IO进程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave的IO进程.返回信息中除了日志所包含的信息之外,还包括本次返回的信息已经到Master端的bin-log文

简单工作原理: (1)从库执行 change master to 语句,会立即将主库信息记录到master.info中 (2)从库执行 start slave语句,会立即生成IO_T和SQL_T (3)IO_T 读取master.info文件,获取到主库信息 (4)IO_T 连接主库,主库会立即分配一个DUMP_T,进行交互  (5)IO_T 根据master.info binlog信息,向DUMP_T请求最新的binlog  (6)主库DUMP_T,经过查询,如果发现有新的,截取并反回给从库I

通过MySQL参数配置使用主主前提: 1.表的主键自增. ################################################################# #m1-m2配置文件更改:再上篇M-S同步基础上增加: ################################################################# m1(192.168.1.31 3306):主库配置文件中添加如下行 vim /data/3306/my.cnf 增加如下

一直以来因为线上系统盘中风控计算过于消耗资源,导致服务器负载太高,时常影响盘中交易的稳定性,最近决定了将风控拆分到独立的库进行计算,并进行回填操作. 总体来说,是将部分风控计算相关的表同步到备库,但是同步的表需要从db_act->db_rsk;db_rsk->db_rsk;db_sys->db_rsk. 由于各种原因,我们需要在一台服务器上搭建开发和测试环境.好久没有单机搭建了,为了下次查找方便,特记录如下(为了省事,采用停机拷贝data文件夹的方式): 1.假设主库已经在正常运行,my

  要讨论如何恢复从库,我们得先来了解如下一些概念: GTID_EXECUTED:它是一组包含已经记录在二进制日志文件中的事务集合 GTID_PURGED:它是一组包含已经从二进制日志删除掉的事务集合.     在继续讨论时,我们先来看下如何新建一个基于GTID的slave. 通过了解上面的两个参数,我们现在只需要: 1.从主库上做一个备份时记录备份时gtid_executed的值. 2.在新的slave上恢复此备份时设置从库的gtid_purged的值为备份时master上gtid_execu

mysql> show slave status\G;*************************** 1. row ***************************               Slave_IO_State: Waiting for master to send event                  Master_Host: 10.19.185.222                  Master_User: backup                 

mysql主从库同步错误:1062 Error 'Duplicate entry '1438019' for key 'PRIMARY'' on query mysql主从库在同步时会发生1062 Last_SQL_Error: Error ‘Duplicate entry ‘的问题:   显然这个问题是因为插入重复主键导致从库不工作了,错误消息如下   mysql> show slave status\G; *************************** 1. row ********

我们知道Oracle有DataGuard实时备份数据.能够做主备切换,而MySQL也有自己的一套备库方案.称之为主从复制. 搭建MySQL从库是为了实时同步主库数据,同一时候也能够分担主库的读压力.对数据库端做成读写分离结构. 搭建MySQL主从库注意点: 1.主库和从库的 server-id 一定不能同样. 2.在主库创建replication slave账户. grant replication slave on *.* to 'repl'@'192.168.0.232' identifie

最近线上频繁的出现slave延时的情况,经排查发现为用户在删除数据的时候,由于表主键的主键的缺少,同时删除条件没有索引,或或者删除的条件过滤性极差,导致slave出现hang住,严重的影响了生产环境的稳定性,也希望通过这篇博客,来加深主键在innodb引擎中的重要性,希望用户在使用RDS,设计自己的表的时候,一定要为表加上主键,主键可以认为是innodb存储引擎的生命,下面我们就来分析一下这个案例(本案例的生产环境的binlog为row模式,对于myisam存储引擎也有同样的问题):(1).现象

MySQL 中drop 等高危误操作后恢复方法 实验目的: 本次实验以恢复drop操作为例,使用不同方法进行误操作的数据恢复. 方法: 利用master同步 伪master+Binlog+同步 利用binlog改为realy-log在临时slave更新(本文) 没有备份怎么恢复被drop的表(利用undrop-for-innodb) 1.环境 mysql 5.7.23-log master db210(192.168.99.210) slave db212(192.168.99.212) 临时s

使用replicate_do_db和replicate_ignore_db时有一个隐患,跨库更新时会出错. 如在Master(主)服务器上设置 replicate_do_db=test(my.conf中设置)use mysql;update test.table1 set ......那么Slave(从)服务器上第二句将不会被执行 如Master设置 replicate_ignore_db=mysqluse mysql;update test.table1 set ......那么Slave上第

MySQL 中drop 等高危误操作后恢复方法 实验目的: 本次实验以恢复drop操作为例,使用不同方法进行误操作的数据恢复. 方法: 利用master同步(本文)] 伪master+Binlog+同步 利用binlog改为realy-log在临时slave更新 没有备份怎么恢复被drop的表(利用undrop-for-innodb) 1.环境 mysql 5.7.23-log master db210(192.168.99.210) slave db212(192.168.99.212) 空闲

年后回来查看mysql运行状况与备份情况,登录mysql从库查看主从同步状态 mysql> show slave status\G; *************************** . row *************************** Slave_IO_State: Master_Host: 101.200.*.* Master_User: backup Master_Port: Connect_Retry: Master_Log_File: master-bin. Rea

目前我们使用的是主从+分库分表的系统架构,主库有N个分库,从库为多个slave做负载均衡,所以数据库端的架构是下面这样的: 因为差不多有一年半没有专门搞技术为主了,顺带回顾下. 这就涉及到多个主库数据同步到不分库分表的从库共查询和管理类系统使用.在mysql 5.6以及之前的版本中,没有原生的解决方法,除非使用mariadb分支,在mysql 5.7之后支持多源复制,除了使用原生的多源复制之外,还有一个选择,就是使用案例开源的otter/canal.如果只是N个库合并到一个库的,我们使用mysq

要讨论如何恢复从库,我们得先来了解如下一些概念: GTID_EXECUTED:它是一组包含已经记录在二进制日志文件中的事务集合 GTID_PURGED:它是一组包含已经从二进制日志删除掉的事务集合.     在继续讨论时,我们先来看下如何新建一个基于GTID的slave. 通过了解上面的两个参数,我们现在只需要: 1.从主库上做一个备份时记录备份时gtid_executed的值. 2.在新的slave上恢复此备份时设置从库的gtid_purged的值为备份时master上gtid_execute

最近线上频繁的出现slave延时的情况,经排查发现为用户在删除数据的时候,由于表主键的主键的缺少,同时删除条件没有索引,或或者删除的条件过滤性极差,导致slave出现hang住,严重的影响了生产环境的稳定性,也希望通过这篇博客,来加深主键在innodb引擎中的重要性,希望用户在使用RDS,设计自己的表的时候,一定要为表加上主键,主键可以认为是innodb存储引擎的生命,下面我们就来分析一下这个案例(本案例的生产环境的binlog为row模式,对于myisam存储引擎也有同样的问题):(1).现象

在从库进行锁表操作flush table with read lock, 通过show slave status\G 获取对应主库的位置点: show slave status\G*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 100.119.16.72 Master_User: root Mas