简单工作原理: (1)从库执行 change master to 语句,会立即将主库信息记录到master.info中 (2)从库执行 start slave语句,会立即生成IO_T和SQL_T (3)IO_T 读取master.info文件,获取到主库信息 (4)IO_T 连接主库,主库会立即分配一个DUMP_T,进行交互  (5)IO_T 根据master.info binlog信息,向DUMP_T请求最新的binlog  (6)主库DUMP_T,经过查询,如果发现有新的,截取并反回给从库I…
  Preface       As wel all know,replication base on GTID with row format of binary log is comprehensive used nowadays,especially in MySQL 5.7 version above.I'm going to demonstrate a simplest way to implement a replacation within two servers.   Frame…
GTID是5.6时加入的,在5.7中被进一步完善,生产环境建议在5.7版本中使用.GTID全称为Global Transaction Identifiers,全局事务标识符.GTID的复制完全是基于事务的,每一个事务对应一个GTID.因此事务执行具有唯一ID,主从复制时,无需再指定POS位置,只要对比ID有没被执行过,并且每个ID仅执行一次. GTID复制限制: 不支持涉及非事务存储引擎的更新不支持CREATE TABLE … SELECT语句不支持针对临时表的操作: CREATE TEMPOR…
一.GTID简介 MySQL 5.6 的新特性之一,是加入了全局事务 ID (GTID) 来强化数据库的主备一致性,故障恢复,以及容错能力. 什么是GTID? 官方文档:http://dev.mysql.com/doc/refman/5.6/en/replication-gtids.html在这篇文档里,我们可以知道全局事务 ID 的官方定义是:GTID = source_id:transaction_id MySQL 5.6 中,每一个 GTID 代表一个数据库事务.在上面的定义中,sourc…
(一.主从复制) 一.mysql主从复制原理    mysql的默认复制方式是主从复制.Mysql内建的复制功能是构建大型,高性能应用程序的基础.将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(slaves)上,并重新执行一遍来实现的.复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器.主服务器将更新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环.这些日志可以记录发送到从服务器的更新.当一个从服务器连接主服务器时…
一 GITD介绍 1.1 gtid的含义 Global Transaction Identifier,全局事务标识 阿里云的rds目前已经使用gtid 基于gtid的主从复制原理 每个mysql数据库上都有一个唯一uuid 每个事务生成一个id gtid由上面两者组合: uuid+事务id 1.2 优势 相对使用binlog+位置的方法来说 gtid让配置主从更加方便 从提升为主时比较方便 二 配置 2.1 主库的配置 [mysqld] bind-address=0.0.0.0 port= da…
基于Docker的TensorFlow 环境搭建 基于(ubuntu 16.04LTS/ubuntu 14.04LTS) 一.docker环境安装 1)更新.安装依赖包 sudo apt-get update sudo apt-get install apt-transport-https ca-certificates curl software-properties-common 2)添加官方密钥 curl -fsSL https://download.docker.com/linux/ub…
随着EOS主网的上线,相信基于EOS的Dapp开发会越来越多,查阅了很多资料相关的开发资料都不是很多,只能自己摸索,按照网上仅有的几篇教程,先git clonehttps://github.com/EOSIO/eos –recursive,然后慢慢编译,然后就陷入了各种报错.各种奔溃的场景.为什么编译不报错的环境都是别人的!!!!. 没办法只能另想办法,突然想到Docker这个神一样的东西(之前的随笔里有一篇是redhat 7.2 内网安装docker),去Docker hub上搜EOS,果然有…
自动化一直是测试圈中的热聊,也是大家追求的技术方向.在测试中,往往回归测试也是测试人员的“痛点”.对于迭代慢.变更少的功能,就能用上自动化来替代人工回归,减轻工作量. 问题 在分享环境搭建之前,先抛出我的一个疑问吧. app启用时,分不同的场景: 1.首次安装启用,有欢迎页: 2.非首次启用,直接进入到登录页: 3.配置了推荐展示时,启用app,会先展示推荐内容,才进入到登录页. 不同场景对应的activity都是不同的,我目前处理办法是,写了个输入函数,加了个if判断去对应不同的activit…
配置mysql基于gtid主从复制架构 一.二进制安装mysql [root@node5 data]# --Linux.x86_64.ssl101.tar.gz [root@node5 data]# --Linux.x86_64.ssl101 percona-server-- [root@node5 data]# - /usr/local/ [root@node5 local]# cd /usr/local/ [root@node5 local]# - mysql # 添加用户 useradd…
MySQL5.7下配置GTID复制的方法: 修改主库和从库的配置文件,加入下列部分的配置项:主库:[mysqld]log-bin=mysql-binbinlog_format= ROWgtid-mode = ONenforce_gtid_consistency = ON 从库:[mysqld]log-bin=mysql-binbinlog_format= ROWlog_slave_updates = ONgtid-mode = ONenforce_gtid_consistency = ONmas…
主从复制原理: 从库生成两个线程,一个I/O线程,一个SQL线程: i/o线程去请求主库 的binlog,并将得到的binlog日志写到relay log(中继日志) 文件中:主库会生成一个 log dump 线程,用来给从库 i/o线程传binlog:SQL 线程,会读取relay log文件中的日志,并解析成具体操作,来实现主从的操作一致,而最终数据一致: mysql的日志类型: Error log 错误日志 General query log普通查询日志 Slow query log 慢查…
事件背景: 前几日在群里看到关总说他的server端是搭建在linux环境下,包括对客户端与服务端的交互处理,感觉整体思路清晰可鉴,于是就想尝试,动手实践,接着从环境搭建开始搞起,于是就有了这篇文章,不得不吐槽下,这是段很深刻的回忆呀,历时1.5工作日,终于搞定环境搭建!! 依赖关联: ps:以我现在的为例,个别根据自己情况调整 JDK 1.8 Android SDK 1.0.40 nodejs 8.7 appium 1.9.1 一.安装jdk: 参考我之前写过的<ubuntu12.04 安装配…
0.1安装python软件 32位机的电脑安装python-3.6.3.exe 64位机的电脑安装python-3.6.3-amd64.exe 0.1.1 python环境搭建 执行安装程序 选择Add Python 3.6 to PATH,然后点击Customize installation 确保所有的选项都被选中,然后点击Next 选择Install for all users,然后定制自己的安装路径.点击Install按钮 安装完成后,启动cmd命令行(需要在管理员界面进入). 输入pyt…
gitlab环境搭建,卸载,汉化--汉化篇 注意gitlab的版本需和汉化版本一致 安装git yum install -y git 下载最新的汉化包 cd git clone https://gitlab.com/xhang/gitlab.git -b v10.0.4-zh //( -b v10.0.2-zh 版本号自己选)     查看gitlab版本号 head -1 /opt/gitlab/version-manifest.txt 查看该汉化补丁的版本 cat gitlab/VERSIO…
gitlab环境搭建,卸载,汉化 --卸载篇 完全卸载 停止gitlab gitlab-ctl stop 卸载gitlab rpm -e gitlab-ce 查看gitlab进程  ps aux | grep gitlab 杀掉第一个进程(就是带有好多-的进程) kill -9 pid // 杀掉后,在ps aux | grep gitlab确认一遍,还有没有gitlab的进程 删除所有包含gitlab文件 find / -name gitlab | xargs rm -rf…
gitlab环境搭建,卸载,汉化 --搭建篇 环境搭建 安装依赖软件 yum -y install policycoreutils openssh-server openssh-clients postfix 设置postfix开机自启,并启动,postfix支持gitlab发信功能  systemctl enable postfix && systemctl start postfix 下载gitlab安装包,然后安装   - 10.0.x版本需要大于4G内存,否则报502(解决办法创建…
全局事务标示符(Global Transactions Identifier)是MySQL 5.6复制的一个新特性. GTID实际上是由UUID+TID组成的.其中UUID是一个MySQL实例的唯一标识.TID代表了该实例上已经提交的事务数量,并且随着事务提交单调递增.下面是一个GTID的具体形式. 1.在MySQL5.6以前对于主从复制出现问题有时候需要你分析BINLOG找到POS点,然后在CHANG MASTER TO.对于新手来说很容易犯错,造成主从复制错误.在新版本中,不必在需要寻找BI…
基本环境 版本 5.7.14 主库ip:192.168.1.100 port:3306 从库ip:102.168.1.101 port:3306 搭建注意事项 主库配置 gtid-mode=on enforce-gtid-consistency=1 binlog_format==row server-id=3306100 log-bin=/data/mysql/mysql3306/logs/mysql-bin binlog_cache_size=4M skip_slave_start=1 从库配…
两个节点:mkdir -p /data/mysql-5721/datamkdir -p /data/mysql-5721/innodbmkdir -p /data/mysql-5721/replicationmkdir -p /data/mysql-5721/logsmkdir -p /data/mysql-5721/confmkdir -p /data/mysql-5721/tmpmkdir -p /data/mysql-5721/scripts MASTER:[client]port=233…
(1)GTID主从复制 1)环境介绍 /etc/redhat-release CentOS Linux release 7.3.1611 (Core) MySQL版本:5.7 mysql> select version(); +------------+ | version() | +------------+ | 5.7.22-log | +------------+ 2) master端配置 准备数据 mysql> create database testdb; mysql> cre…
实现环境: Master 主:192.168.0.102 (Mysql 5.6.36) Slave  从 :192.168.0.103 (Mysql 5.6.36) 步骤1.在主DB服务器上建立复制账号 (在Master上执行) # mysql mysql> CREATE USER 'repl'@'192.168.0.%' identified by '123456'; mysql> GRANT REPLICATION SLAVE ON *.* ' TO repl'@'192.168.0.%'…
        since i've broken down the replication enviornment by "reset master;" yesterday.therefore,i'd like to reconfigure it again,there're several simple steps below:   I. Master node operations: .Check the necessary parameter is surely spedifi…
背景 最近在学习用Spring Aop来实现数据库读写分离的功能. 在编写代码之前,首先是要部署好mysql的环境,因为要实现读写分离,所以至少需要部署两个mysql实例,一主一从,并且主从实例之间能够自动同步,因为我的本机内存并不高,所以就打算在windows上直接搭建mysql的主从实例(不想开虚拟机),但这个过程中却遇到了一些麻烦,虽然最后都解决了,但也花费了不少的时间.为了避免以后在同样的事情上浪费时间,同时也方便读者们能复制相同的场景,所以就写下这篇博客来记录一下搭建环境的过程. 环境…
本文仅供参考,同时感谢帮助我搭建环境的同事 操作系统的名称:Mac OS X操作系统的版本:10.12.6 接下来我们开始踏上搭建Appium+java+ios之路,本文只说个大概,毕竟本机已经装过了,我就不在折腾了,耗费好几天时间才搞定. 一:安装Appium 1.作者系统安装的Appium版本为:1.6.4,安装方法:打开终端输入:npm install –g appium@1.6.4,检查是否安装成功:终端输入appium -v,如果显示版本号说明安装成功. 2.图形界面客户端安装方法:官…
本篇文章主要讲解基于Linux环境的Redis服务搭建,Redis服务配置.客户端访问和防火强配置等技术,适合具有一定Linux基础和Redis基础的读者阅读. 一  Redis服务搭建 1.在根路径建立目录 myredis mkdir myredis 2.进入myredis目录 cd myredis/ 3.Redis搭建 (1)下载Redis wget http://download.redis.io/releases/redis-5.0.4.tar.gz (2)解压Redis包 tar xz…
装备的工具 Ubuntu16.04 , Xshell 使用Xshell链接到Ubuntu 使用xshell链接Ubuntu不是必须的,只是为了操作的方便,同时默认是你的Ubuntu已经安装好了 在Ubuntu中打开终端 ,执行命令 sudo apt-get install openssh-server 因为Ubuntu16.04默认不安装ssh-server服务,要使用Xshell连接上Ubuntu才需要安装 对安装的软件源进行优化 首先备份原有的软件安装源 sudo cp /etc/apt/s…
环境为centos 7.2+mysql 5.7,网上教程很多,原理也不复杂(深知自己踩的坑还不够) 正常情况下,配置起来比较简单.另外,根据个人感受,MySQL的复制感觉要比SQL Server的复制要清爽很多(尽管功能上可能有一些差异). master服务器,首先是开启了二进制日志,同时设置server-id为一个具体的数值 1,创建复制用户 GRANT REPLICATION SLAVE ON *.* to 'repl_test'@'120.77.147.***' identified by…
♥♥  solr是基于lucene的一个全文检索服务器,提供了一些类似webservice的API接口,用户可以通过http请求solr服务器,进行索引的建立和索引的搜索.索引建立的过程:用户提交的文本会经过分词器进行分词,分词后的关键字会存到索引库里,索引库是关键字和目标文档的映射集.索引搜索的过程:用户提交的搜索文本也是会经过分析器,得到的关键字会去索引库查询对应的目标文档并返回给客户端,采用的是权重排序算法. solr和lucene的区别:lucene是一些搜索工具包,任何应用可以引进这些…
一.jdk安装 1.下载地址 http://www.oracle.com/technetwork/java/javase/downloads/index.html 2.安装 3.配置环境变量: open ~/.bash_profile,修改环境变量配置 java_home: export java_home=/Library/Java/JavaVirtualMachines/jdk1.8.0_162.jdk/Contents/Home classpath: export classpath=.;…