最近读一份关于“数据库事务故障恢复"的技术资料,发现对mysql的binlog的认识不够清楚,查阅mysql reference manual有所收获,作为笔记,记录于此。

1. What's binlog
        binlog即binary log,根据mysql文档的说明,binlog包含一系列描
述数据库状态变更的"events"(如table create或insert/update等操作),也包含可能对数据库造成潜在更新的"events"(如未命中
任何行的delete操作)。此外,binlog还包含引起数据库状态变化的操作的执行时间。
        binlog有两个重要用途:
        1) Replication
        对于主从部署的mysql server,master将所有可能更改数据库状态的操作写入binlog并将其同步给slave,后者重放binlog中的操
作序列以便使其数据库状态与master达到一致,这样就实现了master-slave的数据同步。

        2) Data Recover
        数据库恢复时可以回放binlog重建宕机时的数据状态。假设数据库在某个备份点后又运行一段时间后宕机,则server重启后,可
以在上次备份点的基础上,通过回放binlog来重做数据以便恢复上次备份点到server宕机这段时间内的数据状态。

        注意:binlog只包含可能改变数据库状态的操作,因此,select或show等不会修改数据的操作不会记录在binlog中。

2. How to enable binlog
        默认情况下,mysql server不启用binlog(验证方法1: 执行"show variables",若输出中log_bin变量的值为OFF,则表明未启用binlog;验证方法2: 以拥有SUPER权限的用户名登录后执行"show binary logs",会得到输"ERROR 1381 (HY000): You are not using binary logging"的提示)。
        若需要启用binlog,则在启动mysqld时需指定--log-bin[=base_name]参数
        此外,与binlog有关的mysqld启动参数还有--log-bin-index、--log-bin-trust-function-creators、--log-bin-trust-routine-creators、--binlog-do-db、--binlog-ignore-db等。其中,--binlog-do-db=db_name表明当前选中(通过use命令)的库名为db_name时,后续的所有可能更改数据库状态的操作都会被写入binlog;--binlog-ignore-db同理,只不过它显式指定不需要写binlog的db。
        关于--binlog-do-db和--binlog-ignore-db,有个需要注意的地方:例如,当mysqld以--binlog-do-db=sales参数启动,则下面的操作中,针对prices库的update操作也被写入binlog(即使我们未指定prices的binlog行为):

    USE sales;
UPDATE prices.discounts SET percentage = percentage + 10;

这是因为当执行update时,sales为当前被选中的db,同理,--binlog-ignore-db也存在类似的问题。关于这点,可参考 mysql文 的说明。

3. 与binlog有关的几个变量或配置项
        1) log_bin
        表明mysql server是否启用binlog,若启用,其值为ON,否则为OFF。不可动态配置
        2) log_slave_updates
        在replication部署方式下,slave是否将同步自master的updates写入自己的binlog,只在slave启用binlog时有意义。不可动态
配置

        3) max_binlog_cache_size
        同写文件类似,binlog也是先写内核buffer然后在某个时机下才刷盘的。该配置项指明binlog内存cache的最大size,默认最小值
为4096Bytes。可以动态配置,一旦修改,则立即对当前所有活跃会话(active sessions)生效。


        4) max_binlog_size
        指定单个binlog文件的最大size,超过该值则关闭当前binlog文件并创建新的binlog以便后续写入。最小值为4096Bytes,最大值
为1GB,默认也为1GB。可以动态配置


        5) sync_binlog
        指定binlog刷盘的触发时机。若值大于0,则每sync_binlong次写binlog的操作会触发一次刷盘。若配为1,则每次写binlog操作
都会刷盘,最大程度地保证了数据安全,但效率最低;实际生产环境中,需根据业务需求配置合理的阈值。可以动态配置

4. binlog写入时机及查看方法
        根据mysql文档,写binlog的时机是:sql语句或transaction执行完,但任何相关的locks还未释放或事务还未最终commit前。这样保证了binlog记录的操作时序与数据库实际的数据变更顺序一致。
        可以通过mysqlbinlog工具查看binlog内容,在mysql安装目录下输入./bin/mysqlbinlog -?或--help可以看到其用法,这里不再赘述。
        当mysql数据需要恢复时,mysqlbinlog工具可以根据binlog的记录方便地实现命令重做:
        shell> mysqlbinlog log_file | mysql -h server_name

【参考资料】

1. mysql refman 5.0 - The Binary Log 

2.
mysql refman 5.0 - Binary Log Options and Variables

======================= EOF =======================

【Mysql学习笔记】浅析mysql的binlog的更多相关文章

  1. 吴裕雄--天生自然MySQL学习笔记:MySQL 安装

    所有平台的 MySQL 下载地址为: MySQL 下载:https://dev.mysql.com/downloads/mysql/ 注意:安装过程我们需要通过开启管理员权限来安装,否则会由于权限不足 ...

  2. 吴裕雄--天生自然MySQL学习笔记:MySQL 运算符

    要介绍 MySQL 的运算符及运算符的优先级. MySQL 主要有以下几种运算符: 算术运算符 比较运算符 逻辑运算符 位运算符 算术运算符 MySQL 支持的算术运算符包括: 在除法运算和模运算中, ...

  3. 吴裕雄--天生自然MySQL学习笔记:MySQL 导入数据

    1.mysql 命令导入 使用 mysql 命令导入语法格式为: mysql -u用户名 -p密码 < 要导入的数据库数据(runoob.sql) 实例: # mysql -uroot -p12 ...

  4. 吴裕雄--天生自然MySQL学习笔记:MySQL 处理重复数据

    有些 MySQL 数据表中可能存在重复的记录,有些情况允许重复数据的存在,但有时候我们也需要删除这些重复的数据. 防止表中出现重复数据 可以在 MySQL 数据表中设置指定的字段为 PRIMARY K ...

  5. 吴裕雄--天生自然MySQL学习笔记:MySQL 临时表

    MySQL 临时表在我们需要保存一些临时数据时是非常有用的.临时表只在当前连接可见,当关闭连接时,Mysql会自动删除表并释放所有空间. MySQL临时表只在当前连接可见,如果使用PHP脚本来创建My ...

  6. 吴裕雄--天生自然MySQL学习笔记:MySQL 事务

    MySQL 事务主要用于处理操作量大,复杂度高的数据.比如说,在人员管理系统中,你删除一个人员,你即需要删除人员的基本资料,也要删除和该人员相关的信息,如信箱,文章等等,这样,这些数据库操作语句就构成 ...

  7. 吴裕雄--天生自然MySQL学习笔记:MySQL GROUP BY 语句

    GROUP BY 语句根据一个或多个列对结果集进行分组. 在分组的列上我们可以使用 COUNT, SUM, AVG,等函数. GROUP BY 语法 SELECT column_name, funct ...

  8. 吴裕雄--天生自然MySQL学习笔记:MySQL UNION 操作符

    MySQL UNION 操作符用于连接两个以上的 SELECT 语句的结果组合到一个结果集合中.多个 SELECT 语句会删除重复的数据. 语法 MySQL UNION 操作符语法格式: SELECT ...

  9. 吴裕雄--天生自然MySQL学习笔记:MySQL 连接

    使用mysql二进制方式连接 您可以使用MySQL二进制方式进入到mysql命令提示符下来连接MySQL数据库. 实例 以下是从命令行中连接mysql服务器的简单实例: [root@host]# my ...

  10. 吴裕雄--天生自然MySQL学习笔记:MySQL 管理

    启动及关闭 MySQL 服务器 Windows 系统下 在 Windows 系统下,打开命令窗口(cmd),进入 MySQL 安装目录的 bin 目录. 启动: cd c:/mysql/bin mys ...

随机推荐

  1. webView 加载本地文件 - html/htm pdf docx tx

    - (void)viewDidLoad { [super viewDidLoad]; [self setupUI]; NSString *path = [[NSBundle mainBundle] p ...

  2. Bengio最新博文:深度学习展望

    Bengio最新博文:深度学习展望 人类一直梦想着创造有智能的机器.早在第一台可编程计算机问世前100多年,发明家就对如何能让由连杆和齿轮组成的设备也变得更加智能这一命题充满好奇.后来,20世纪40年 ...

  3. ***PHP 去除换行符

    PHP在不同的系统中,换行是不同的 Linux:\n Windows:\r\n mac:\r 所以去除回车换行的方法: 1.使用php定义好的变量(比较好的方法,推荐) $str= str_repla ...

  4. easyui源码翻译1.32--LinkButton(按钮)

    前言 使用$.fn.linkbutton.defaults重写默认值对象.下载该插件翻译源码 按钮组件使用超链接按钮创建.它使用一个普通的<a>标签进行展示.它可以同时显示一个图标和文本, ...

  5. 了解实时媒体的播放(RTP/RTCP 和 RTSP)

    http://blog.csdn.net/span76/article/details/12913307 RTP/RTCP RTP是基于 UDP协议的, UDP不用建立连接,效率更高:但允许丢包, 这 ...

  6. Bamboo简介

    前言     前面介绍了JIRA管理平台,那么本篇就来介绍关于自动编译项目的工具-Bamboo. 正题 1.简介 Atlassian Bamboo 是一款持续集成构建服务器软件(Build Serve ...

  7. Android开发之AlertDialog

    http://www.cnblogs.com/Gaojiecai/archive/2011/12/10/2283156.html http://www.2cto.com/kf/201205/13187 ...

  8. Web服务器排行:Nginx超越Apache 成为全球

    Apache(34.5%)第一名的位置.不过,纵观全球,Apache仍然是最受欢迎的Web服务器,有65.3%的网站使用. 在排名前100万的网站中,主流服务器仍为Apache,占据了60.6%的份额 ...

  9. 【转】在Xcode中使用Git进行源码版本控制 -- 不错

    原文网址:http://www.cocoachina.com/ios/20140524/8536.html 本文翻译自Understanding Git Source Control in Xcode ...

  10. FZU2236 第十四个目标 dp+树状数组优化

    分析:这种题烂大街,n^2,然后数据结构优化下到nlogn,离散化 #include <cstdio> #include <cstring> #include <queu ...