Mysql Binlog日志文件介绍
一、Binlog简介
官方文档参考 https://dev.mysql.com/doc/refman/5.5/en/binary-log.html
Binlog(Binary Log) 指数据库的表创建或者表数据变更的时候产生的事件event以二进制的形式存储在磁盘中,它记录了Mysql所有的DDL和DML语句(查询SELECT和SHOW除外)。除非是记录行(ROW模式)的日志记录,否则的话还包含"有可能进行变更"的语句,如:
DELETE FROM #table WHERE 0=1; (注:无效SQL)
mysqld会根据文件名、自增数据创建一系列有序的Binlog文件名,每次重启服务器、刷新日志、Binlog文件大小达到阀值时会创建一个新的有序Binlog文件。有可能Binlog文件会比max_binlog_size大,因为零界点一次使用大型事务时不会拆分成2个binlog文件。
tips: 开启Binlog服务器性能会略微降低,但是相比而言数据安全和可恢复更加重要,且Binlog是Mysql主从同步主要的方式。
二、Binlog使用场景
- 主从复制,主服务器将二进制文件发送给其他从服务器,从服务器执行这些事件进行相同的数据变更
- 某些数据恢复的场景会用到Binlog,恢复备份后执行备份后的执行Binlog,使备份数据库保持最新
- 从mysql到nosql等的数据同步(订阅Binlog并分析、执行数据)
- 实时数据分析等,大数据、搜索等
- 业务数据缓存更新
- 重要数据变化的业务通知
三、Binlog支持的数据模式
官方文档参考 https://dev.mysql.com/doc/refman/5.5/en/binary-log-formats.html
- STATEMENT 基于SQL语句的同步
- ROW 基于行数据的日志记录,指的是单表行收到的影响事件写入到Binlog中
- MIXED(ROW和STATEMENT的混合方式,默认情况下使用STATEMENT的日志记录,但在某些情况下,日志记录模式会自动切换为基于ROW)
在MySQL 5.5中,默认的二进制日志记录格式是 STATEMENT。
在MySQL 5.7中,默认的二进制日志记录格式是 ROW。
三种方式的优缺点
STATEMENT:优点数据量比较小(特别是批量SQL更新情况下),缺点是同样的WHERE条件某些场景下主从执行的结果可能是不一致的。
ROW:记录的是一行所有的数据变更优点数据一致性略好,缺点数据量会比较大,特别是批量更新的时候 UPDATE #table WHERE 1=1
MIXED:结合和STATEMENT 和 ROW的优点
比较推荐的是ROW方式,虽然数据量会稍微大一些但同时也保持了数据的一致性,且对存储过程,事务,触发器等的支持较好(只需要关注数据层面),MIXED个人感觉存在一定的不确定性因素。
注:MySQL 5.7 ROW多了一个参数binlog_row_image[full|minimal] ,minimal模式下行所有数据变更成了具体更新的某几列数据。这样数据量就ROW模式下的数据量可以减少很多,难怪5.7的版本会把ROW设为默认值。参考文章 https://www.cnblogs.com/gomysql/p/6155160.html
四、Binlog数据格式更改
设置系统变量的全局值 以指定更改后连接的客户端的格式
mysql> SET GLOBAL binlog_format = 'STATEMENT';
mysql> SET GLOBAL binlog_format = 'ROW';
mysql> SET GLOBAL binlog_format = 'MIXED';
单个客户端可以通过设置会话值来控制自己的语句的日志格式
mysql> SET SESSION binlog_format = 'STATEMENT';
mysql> SET SESSION binlog_format = 'ROW';
mysql> SET SESSION binlog_format = 'MIXED';
五、MySQL Binlog数据同步原理
前面提到了mysql的主库(master)对表的变更(除查之外)都会记录到Binlog文件中,从库( slave ) 的IO Thread异步地同步Binlog文件并写入到本地的Replay文件,SQL Thread( slave ) 再抽取Replay文件中的SQL语句在从库进行执行,实现数据更新达到主从同步的目的。
Binlog是Mysql主要的主从同步方式,是一种基于stream的异步复制(并不能做到实时同步,有一定延迟)
推荐使用Row这种格式,可以很方便的反应行级别的数据变化。以下截图来自网上

Mysql Binlog日志文件介绍的更多相关文章
- MySQL 各类日志文件介绍
日志文件 1.错误日志 ErrorLog 错误日志记录了MyQLServer运行过程中所有较为严重的警告和错误信息,以及MySQLServer每次启动和关闭的详细信息. 在默认情况下,系统记录错误日志 ...
- Mysql bin-log日志文件处理
当MySQL开启bin-log选项后,会不停的记录bin-log,但是几天前的日志肯定就没用了或者可以备份到别处,那么如何正确的处理这些日志呢 参考一下几篇文章 MySQL mysql-bin log ...
- Mysql binlog日志的介绍
mysql的复制功能是 大规模,高性能应用的基础. 分担读负载.水平扩展 是通过二进制日志进行复制,是异步的. 只记录成功执行的修改事件,出现错误的和回滚的是不会纪录的. 日志路径 查看日志 RO ...
- MySQL各类日志文件相关变量介绍
文章转自:http://www.ywnds.com/?p=3721 MySQL各类日志文件相关变量介绍 查询所有日志的变量 1 mysql> show global variables li ...
- mysql将bin-log日志文件转为sql文件
查看mysqlbinlog版本 mysqlbinlog -V [--version] 查看binlog日志开启状态 show variables like '%log_bin%'; mysql打开bi ...
- Mysql Binlog日志详解
一.Mysql Binlog格式介绍 Mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW! 1.Statement:每一条会修改数据的sql都会记录在 ...
- MySQL - binlog日志简介及设置
基本概念 binlog是Mysql sever层维护的一种二进制日志,与innodb引擎中的redo/undo log是完全不同的日志:其主要是用来记录对mysql数据更新或潜在发生更新的SQL语句, ...
- MySQL的日志文件
本文将重点介绍MySQL的日志文件类型,并讲解其作用,并结合一定实操演示,相信跟着做下来你会对MySQL有更深的理解. 文件的概念 在开始讲MySQL日志文件之前,首先我们要明确一下文件的概念.MyS ...
- 阿里云mysql数据库恢复总结,mysql binlog日志解析
由于意外..阿里云mysql中有一张表被全部删除了,深吸三口气候,开始解决. 首先用凌晨的自动备份的,进行全量恢复,然后找binlog日志(见下文),查找从全量备份到数据删除之间的记录 这导致了一个问 ...
随机推荐
- shell脚本,每5个字符之间插入"|",行末不插入“|”。
文本aaaaabbbbbcccccdddd eeeeefffffkkkkkvvvv nnnnnggggg 希望得到的结果如下: aaaaa|bbbbb|ccccc|dddd eeeee|fffff|k ...
- noip_最后一遍_2-图论部分
大体按照 数学 图论 dp 数据结构 这样的顺序 模板集 这个真的只有模板了……………… ·spfa #include<bits/stdc++.h> using namespace std ...
- 前端上传控件plupload总结
plupload是一个单图和多图上传控件: 属性和方法介绍,参考以下博客: https://www.cnblogs.com/2050/p/3913184.html 这里直接贴出JS代码,细到爆的注释, ...
- (57)zabbix Slide shows幻灯片展示
定义好screen之后,我们想了解服务器状况之时,一般会一个个screen点过去,zabbix提供了幻灯片展示方法,可以定义多个Slide,一个slide中可以包含多个screen. 创建slide ...
- 五分钟入门 Dingo API
基于 https://laravel-china.org/doc... 文档更简洁的描述Dingo,直戳重点,注重实践 Django-Book 概述 Dingo API帮助您轻松快速地构建自己的API ...
- XML,面向对象基础
什么是XML XML与JSON的对比 XML文档格式 使用XML模块解析 一,什么是XML ''' XML 全称可扩展标记语言 <tag></tag> 双标签 <tag/ ...
- python面向对象(反射)(四)
1. isinstance, type, issubclass isinstance: 判断你给对象是否是xx类型的. (向上判断 type: 返回xxx对象的数据类型 issubclass: 判断x ...
- vs进行C#编程中常用的几个快捷键
(1)输入svm然后按Tab键会生成Main函数: (2)Ctrl +k+s 三个键一起按,会调出代码段:选中多行后,然后按以上三个快捷键,输入需要使用的代码段,按下Tab,代码段会自动包括选中代码. ...
- iOS 引入支付宝 缺少 #include <openssl/asn1.h>
出现情况如上图: 解决方法如下:在你的Xcode里的header search paths 里添加支付宝SDK(openssl的路径):格式如下 $(PROJECT_DIR)/文件夹名 ...
- [转]构建Python+Selenium2自动化测试环境(二)
构建Python+Selenium2自动化测试环境完成之后,就需要测试支持python的selenium的版本是否都支持在不同浏览器上运行,当前我们分别在三个最通用的浏览器上通过脚本来测试. 1.在I ...