mysql 原理 ~ 线程与IO

一 简介:今天来聊聊具体的线程和IO

二 具体线程与作用

1 master thread    mysql的主要工作触发线程

1 redo and binlog日志
      2 合并插入缓冲。
      3 脏页的刷新
      4 undo页回收
      5 产生一个ckp点

2 IO THREAD

insert buffer thread->insert buffer merges插入缓冲线程 1个
     log thread -> asynchronous log flushes 日志线程 1个
     read thread -> read-ahead负责数据块的读取) 读线程 4个
     write thread -> flushing of dirty buffers(负责数据库的写入) 写线程 4个

3 innodb_purge_threads

1  脏页清理线程 2 undo段的回收 3 对delete标记数据进行清除

三 涉及到的主要IO

线程部分

IO THREAD部分

目标部分

事务

1 dirty pages 2 log cache 3 insert buffer

查询

1 normal pages

参数部分

dirty page
    write_io_thread 写线程 (多核cpu能更好利用)
    innodb_io_capacity 一次刷新脏页的数量
    innodb_adaptive_flushing 是否临脏页刷新
   redo cache
   innodb_flush_log_at_trx_commit 刷新到磁盘的redo event事务数量
   binlog cache
   sync_log 刷新到磁盘的binlog event事务数量
  通用
  read_io_thread 读线程 (多核cpu能更好利用)
  innodb_flush_method

四 名词解析

1 IO操作三要素 read / write/ sync

2 同步IO 在同步文件IO中，线程启动一个IO操作然后就立即进入等待状态，直到IO操作完成后才醒来继续执行  例如redo的刷新,负责线程 master thread

异步IO   异步文件IO方式中，线程发送一个IO请求到内核，然后继续处理其他的事情，内核完成IO请求后，将会通知线程IO操作完成了。 如果IO请求需要大量时间执行的话，异步文件IO方式可以显著提高效率 (缩写 aio) 例如脏页的刷新,负责线程 io thread

请记住

1 master thread和 io thread是独立的,并非相互干涉

2 mysql利用AIO的方式大大提高了处理效率

五  flush_method 补充

1  O_DIRECT 数据文件的写入操作是直接从mysql innodb buffer到磁盘的，并不用通过操作系统的缓冲，而真正的完成也是在flush这步,日志还是要经过OS缓冲

2 fdatasync模式：写数据时，write这一步并不需要真正写到磁盘才算完成（可能写入到操作系统buffer中就会返回完成），真正完成是flush操作，buffer交给操作系统去flush,并且文件的元数据信息也都需要更新到磁盘。。