mysql-索引-日志
索引:基于元数据之上的在某个字段或多个字段取出来,索引是加速读操作的,但对写操作时有副作用的
BTree 索引:抽取出来重新排序,是左前缀索引每一个叶子结点到根结点的距离相同;
哈希索引:基于键查找值的索引方式innodb不支持,
位图索引:mysql不支持
全文索引:
适用于B+ TREE索引的查询类型:全键值、键值范围或键前缀
全值匹配:精确匹配某个值;WHERE COLUMN = 'value'
匹配最左前缀:只精确起头的部分WEHRE COLUMN LIKE 'PREFIX%'
匹配范围值:
精确匹配某一列,范围匹配另一列;
只用访问索引的查询:覆盖索引;是一种快速的查询
不适用B+ TREE索引:
1如果查条件不是从最左侧列开始,索引无效;
2不能跳过索引中的某列;
3如果查询中的某个列是为范围查询,那么其右侧的列都无法再使用索引优化查询;
Hash索引:基于哈希表实现,特别适用于值的精确匹配查询;
适用场景:
只支持等值比较查询,例如=, IN(), <=>精确比较
不用场景:
所有非精确值查询;MySQL仅对memory存储引擎支持显式的hash索引;
索引优点:
降低需要扫描的数据量,减少IO次数;
可以帮助避免排序操作索引本身就是顺序的,避免使用临时表;
帮助将随机IO转为顺序IO;
高性能索引策略:
(1) 在WHERE中独立使用列,尽量避免其参与运算;
WHERE age+2 > 32 ;
(2) 左前缀索引:索引构建于字段的最左侧的多少个字符,要通过索引选择性来评估
索引选择性:不重复的索引值和数据表的记录总数的比值;
(3) 多列索引:
AND连接的多个查询条件更适合使用多列索引,而非多个单键索引;
(4) 选择合适的索引列次序:选择性最高的放左侧;如等值比较的放左侧
创建索引:
CREATE INDEX AGE on students(age); 创建索引
SHOW INDEXES FROM students; 查看创建的索引
EXPLAIN select name from students WHERE age > 90; 查看有没有用到索引
id:当前查询语句中,第个SELECT语句的编号;
select_type:查询类型:
简单查询:SIMPLE
复杂查询:
简单子查询:SUBQUERY
·用于FROM中的子查询:DERIVED
·联合查询中的第一个查询:PRIMARY
联合查询中的第一个查询之后的其它查询:UNION
联合查询生成的临时表:UNION RESULT
table:查询针对的表;
type:关联类型,或称为访问类型,即MySQL如何去查询表中的行
ALL:全表扫描
index:根据索引的顺序进行的全表扫描;但同时如果Extra列出现了"Using index”表示使用了覆盖索引
range:有范围限制地根据索引实现范围扫描;扫描位置始于索引中的某一项,结束于另一项;
ref:根据索引返回的表中匹配到某单个值的所有行(匹配给定值的行不止一个);
eq_ref:根据索引返回的表中匹配到某单个值的单一行,仅返回一个行,但需要与某个额外的参考值比较,而不是常数;
const,system:与某个常数比较,且只返回一行;精确比较,返回一行
possiable_keys:查询中可能会用到的索引
key:查询中使用的索引;
key_len:查询中用到的索引长度;
ref:在利用key字段所显示的索引完成查询操作时所引用的列或常量值;
rows:MySQL估计出的为找到所有的目标项而需要读取的行数
Extra:额外信息
Using index:使用了覆盖索引进行的查询;
Using where:拿到数据后还要再次进行过滤;
Using temporary:使用了临时表以完成查询;
Using filesort:对结果使用了一个外部索引排序;
mysql的账号授权
1 mysql的域名解析需要关闭防止反解
skip_name_resolve=on
创建用户:create user ‘user’@‘host’identified by passwd
重命名:rename user old_user to newuser
删除用户:drop user ‘user‘@‘host’
修改用户密码:
1 set password [for ‘user’@’host’] = password (‘cleartext password’);
如:set password for ‘root’@’localhost’ = password(‘magedus’) ;
2update mysql.user set password=PASSWORD(‘cleartext passwd’) where user = ‘username’ and host= ‘host’ ;
3 mysqladmin -uuser -hlocalhost –p password ‘new_pass’
忘记密码解决方法:
1 启动mysql进程时 使用—skip-grant-tables 和 –skip-networking
2通过update命令修改管理员密码
3 已正常方式启动mysql
如:在配置文件中的ExecStart=……. 后面加上—skip-grant-tables –skip-networking
重载: systemctl daemon-reload
启动:
再连接mysql是不需要密码的
update mysql.user set password=PASSWORD=(‘magedu’) ;
改完后在停止服务,
再把配置文件加的两项删了
在重启服务。
让mysql重新加载授权表:fiush privileges
当数据库存在用户的时候GRANT会对用户进行授权,但当数据库不存在该用户的时候,就会创建相应的用户并进行授权。
grant select on hidb.students TO ‘text’@’172.16.8.%’ IDENTIFIED BY ‘mageud’;
如
缓存:
所有缓存都有有效期限,为了保持缓存中的数据与原始数据保持一致,需要让缓存区数据联动失效,mysql自身具有缓存功能,
外部的缓存系统:redis ,当mysql的节点过多时
mysql的查询流程:
客户端----缓存(有缓存直接返回)----解析器 -------预处理器-----查询优化器
----查询执行引擎(会通过调用存储引擎来调取数据)------结果返回给客户,并添加到缓存
查询缓存:
如何判断缓存是否命中:
查询缓存相关:
show global variables like ‘query_cache%’;
set GLOBAL query_cache_limit=1024*1024*2;
查询缓存相关的服务器变量:
query_cache_limit:能够缓存的最大查询结果;(单语句结果集大小上限)
有着较大结果集的语句,显式使用SQL_NO_CACHE,以避免先缓存再移出;
query_cache_min_res_unit:内存块的最小分配单位;缓存过小的查询结果集会浪费内存空间;
较小的值会减少空间浪费,但会导致更频繁地内存分配及回收操作;
较大值的会带来空间浪费;
query_cache_size:查询缓存空间的总共可用的大小;单位是字节,必须是1024的整数倍;
query_cache_strip_comments:OFF 一般不需要
query_cache_type:缓存功能启用与否;ON:启用;OFF:禁用;
如select SQL NO CACHE NAME FROM STUDENTS WHERE stuID=7; 表示不添加到缓存
query_cache_wlock_invalidate:如果某表被其它连接锁定,是否仍然可以从查询缓存中返回查询结果;默认为OFF,表示可以;ON则表示不可以;
缓存的状态变量:SHOW GLOBAL STATUS LIKE ‘Qcache%’;用来对应显示你的空间中缓存的有效性,用来统计数据的,可以判断出来缓存是否有效
mysql> SHOW GLOBAL STATUS LIKE 'Qcache%';
+-------------------------+----------+
| Variable_name | Value |
+-------------------------+----------+
| Qcache_free_blocks | 1 | 剩余的块空间没有用
| Qcache_free_memory | 16759688 | 内存空间
| Qcache_hits | 0 | 命中次数
| Qcache_inserts | 0 | 被使用多少次
| Qcache_lowmem_prunes | 0 | 定义缓存清理空间的次数
| Qcache_not_cached | 0 | 没能缓存进来的缓存
| Qcache_queries_in_cache | 0 | 现在缓存中有存多少数据
| Qcache_total_blocks | 1 | 一共分配出多少块
+-------------------------+----------+
SHOW GLOBAL STATUS LIKE ‘com_select ’ 执行select的次数
日志
mysql把数据存储的文件有两种 一种是数据索引相关的文件,一种是日志文件
查询日志:general_log
慢查询日志:log_slow_queries 查询时间超过指定时长的日志
错误日志:log_error, log_warnings
二进制日志:binlog 记录着运行过程中引起数据改变的操作,像主从操作就是基于这个日志的,重服务器读取这个日志,放在自己的中继日志中,重自己起一个程序,来读一条执行一个。来保持主从一致
这个日志还可以做时间点恢复的。
中继日志:relay_log
事务日志:innodb_log 可以完成事物的回滚操作
1、查询日志
启动日志
查看日志位置
2、慢查询日志
查询:运行时间超出指定时长的查询;默认是关闭的
查看超出多长时间算慢
3、错误日志
记录信息:
(1) mysqld启动和关闭过程 输出的信息;
(2) mysqld运行中产生的错误信息;
(3) event scheduler(事件调度器)运行时产生的信息;
(4) 主从复制架构中,从服务器复制线程启动时产生的日志
4、二进制日志
用于记录引起数据改变或存在引起数据改变的潜在可能性的语句(STATEMENT)或改变后的结果(ROW),也可能是二者混合;
binlog_format={STATEMENT|ROW|MIXED}
记录有三种格式
STATEMENT:基于语句;
ROW:基于行; 语句的结果
MIXED:混编;
查看二进制日志文件列表:
查看当前正在使用的二进制日志文件:
查看二进制 日志文件中的事件
SHOW BINLOG EVENTS IN ‘master-log.000002’ from 245 LIMIT 3;
也可以查看二进制日志文件:
#mysqlbinlog master-log.00002
服务器变量:
log_bin=/PATH/TO/BIN_LOG_FILE
session.sql_log_bin={ON|OFF} 控制某会话中的“写”操作语句是否会被记录于日志文件中
max_binlog_size=1073741824
sync_binlog={1|0} 是否同步二进制日志到磁盘文件中区
mysqlbinlog 命令用来查看二进制日志的
二进制日志事件格式:
# at 553
#160831 9:56:08 server id 1 end_log_pos 624 Query thread_id=2 exec_time=0 error_code=0
SET TIMESTAMP=1472608568/*!*/;
BEGIN
/*!*/;
事件的起始位置:# at 553
事件发生的日期时间:#160831 9:56:08
事件发生的服务器id:server id 1
事件的结束位置:end_log_pos 624
事件的类型:Query
事件发生时所在服务器执行此事件的线程的ID: thread_id=2
语句的时间戳与将其写入二进制日志文件中的时间差:exec_time=0
错误代码:error_code=0
事件内容:SET TIMESTAMP=1472608568/*!*/;
中继日志:
从服务器上记录下来从主服务器的二进制日志文件同步过来的事件;
事务日志:
事务型存储引擎innodb用于保证事务特性的日志文件:
mysql-索引-日志的更多相关文章
- mysql 索引及其原理
mysql 索引 KEY与INDEX的区别: KEY is something on the logical level, describes your table and database desi ...
- MySQL 索引详解大全
什么是索引? 1.索引 索引是表的目录,在查找内容之前可以先在目录中查找索引位置,以此快速定位查询数据.对于索引,会保存在额外的文件中. 2. 索引,是数据库中专门用于帮助用户快速查询数据的一种数据结 ...
- mysql索引补充
索引补充 1.索引 索引是表的目录,在查找内容之前可以先在目录中查找索引位置,以此快速定位查询数据.对于索引,会保存在额外的文件中. 2.索引种类 普通索引:仅加速查询 唯一索引:加速查询 + 列 ...
- mysql 的日志文件
mysql的日志文件 日志文件大致分为 error log, binary log, query log, slow query log, innodb redo log ;如图: 1.error ...
- 最全面的 MySQL 索引详解
什么是索引? 1.索引 索引是表的目录,在查找内容之前可以先在目录中查找索引位置,以此快速定位查询数据.对于索引,会保存在额外的文件中. 2.索引,是数据库中专门用于帮助用户快速查询数据的一种数据结构 ...
- [转载]mysql慢日志文件分析处理
原文地址:mysql慢日志文件分析处理作者:maxyicha mysql有一个功能就是可以log下来运行的比较慢的sql语句,默认是没有这个log的,为了开启这个功能,要修改my.cnf或者在mysq ...
- MySQL 错误日志(Error Log)
同大多数关系型数据库一样,日志文件是MySQL数据库的重要组成部分.MySQL有几种不同的日志文件.通常包括错误日志文件,二进制日志,通用日志,慢查询日志,等等. 这些日志能够帮助我们定位mysqld ...
- MySQL慢日志查询全解析:从参数、配置到分析工具【转】
转自: MySQL慢日志查询全解析:从参数.配置到分析工具 - MySQL - DBAplus社群——围绕数据库.大数据.PaaS云,运维圈最专注围绕“数据”的学习交流和专业社群http://dbap ...
- mysql基础---日志文件
一 基本日志文件 MYSQL有不同类型的日志文件(各自存储了不同类型的日志),从它们当中可以查询到MYSQL里都做了些什么,对于MYSQL的管理工作,这些日志文件是不可缺少的. 1.错误日志(The ...
- MySQL二进制日志总结
二进制日志简单介绍 MySQL的二进制日志(binary log)是一个二进制文件,主要用于记录修改数据或有可能引起数据变更的MySQL语句.二进制日志(binary log)中记录了对MySQL数据 ...
随机推荐
- python操作mysql数据库增删改查的dbutils实例
python操作mysql数据库增删改查的dbutils实例 # 数据库配置文件 # cat gconf.py #encoding=utf-8 import json # json里面的字典不能用单引 ...
- java压缩图片质量
使用了工具thumbnailator,据说thumbnailator是一个非常好的图片开源工具,使用起来很方便.不过没仔细看过,我只是需要压缩图片,让其占用空间变小而已.使用maven引入jar包 & ...
- android端 socket长连接 架构
看过包建强的<App研发录>之后对其中的基础Activity类封装感到惊讶,一直想找一种方式去解决关于app中使用socket长连接问题,如何实现简易的封装来达到主活动中涉及socket相 ...
- jQuery实现鼠标点击div外的地方div隐藏消失的效果(转)
转:https://www.cnblogs.com/jsingleegg/p/3456152.html css部分: <style type="text/css">.p ...
- 存储过程数据insert into select
create or replace procedure PRO_K3_CZZH (org_name in varchar2, --财政专户名称 opertype in varchar2, --操作类型 ...
- html超文本标记语言
<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8" ...
- poj2441状态压缩dp基础
/* 给定n头牛,m个谷仓,每头牛只能在一些特定的谷仓,一个谷仓只能有一头牛 问可行的安排方式 dp[i][j]表示前i头牛组成状态j的方案数,状态0表示无牛,1表示有牛 使用滚动数组即可 枚举到第i ...
- C++ GetUserName()
关于函数“GetUserName()”,参见:https://msdn.microsoft.com/en-us/library/windows/desktop/ms724432(v=vs.85).as ...
- RESTful架构解读
什么是REST REST与技术无关,代表的是一种软件架构风格.REST全称是Representational State Tranfer, 表征性状态转移. REST从资源的角度类审视整个网络,它将分 ...
- Linux系统下inode满了导致无法写文件的解决思路
解决思路1:删除无用的临时文件,释放inode 进入/tmp目录,执行find -exec命令 find /tmp -type f -exec rm {} \; 遍历寻找0字节的文件,并 ...