《MySQL面试小抄》查询缓存机制终面
《MySQL面试小抄》查询缓存机制终面
我是肥哥,一名不专业的面试官!
我是囧囧,一名积极找工作的小菜鸟!
囧囧表示:小白面试最怕的就是面试官问的知识点太笼统,自己无法快速定位到关键问题点!!!
本期主要面试考点
面试官考点之简述一下什么是查询缓存机制?
面试官考点之查询如何命中缓存?
面试官考点之什么场景下SQL和结果集不会被缓存?
面试官考点之什么场景下会导致MySQL缓存失效?
面试官考点之查询缓存是如何进行内存管理的?
面试官考点之MySQL是一次性分配所有的内存空间吗?
面试官考点之缓存中的内存碎片无法避免,那么有什么办法优化吗?
面试官考点之MySQL4.0提出了查询缓存,它设计出来是为了加速哪些查询场景?
面试官考点之MySQL5.6中默认禁用,8.0以后完全移除,造成这个改变的原因是什么?
面试官考点之生产环境要不要开启MySQL缓存?


面试官考点之简述一下什么是查询缓存机制?
MySQL服务器高负载情况下,我们需要采取一种措施给服务器减轻压力,一个复杂的查询是非常消耗性能的,
其中磁盘IO又占据主要资源,缓存是对系统性能优化的一种重要手段。
查询缓存机制设计是为了从根本上减少磁盘IO次数,MySQL开启缓存后,将SQL和结果集以键值对KV的形式存储在内存中。
当相同的SQL再次进入,MySQL识别是相同查询喉,会直接返回缓存在内存中的结果集。
避免再次进行一系列复杂的解析优化和磁盘IO过程。
面试官考点之查询如何命中缓存?
select id from user;
select id FROM user;
上面语句能命中缓存吗?
MySQL缓存命中机制有严格苛刻的要求,在判断命中前,MySQL不会对SQL做任何的解析处理。
SQL上的任何字符的不同,如大小写、空格、注释等都会导致缓存不命中
所以上面查询时无法命中缓存的。
面试官考点之什么场景下SQL和结果集不会被缓存?
或者说缓存规则是什么?
第一种情况:查询语句中包含不确定数据
例如查询语句中包含不确定函数:NOW()、CURRENT_DATE()等。
因为每次执行这类带了不确定数据的查询所返回结果可能是不同的。
第二种情况:超过了query_cache_limit预设阈值
超出了缓存内存能承受的范围,将放弃缓存!
面试官考点之什么场景下会导致MySQL缓存失效?
任何对于表结构或者表数据的更新操作,一定会造成查询缓存中的数据失效,同时查询缓存值的相关条目也会被清空。
MySQL判定有更新操作,就会设置所有的查询缓存失效。
面试官考点之查询缓存是如何进行内存管理的?
MySQL服务启动,缓存机制会在内存中开辟一块内存,
其中会划分出一块区域专用来管理维护缓存数据的元数据。
例如空间内存、数据表和查询结果的映射,SQL和查询结果的映射
MySQL缓存机制将剩余的空闲空间分为一个个小数据块,用来存储缓存结果。
每个小块中存储自身的类型,大小和查询结果数据,还有指向前后内存块的指针
面试官考点之MySQL是一次性分配所有的内存空间吗?
MySQL因为无法预知查询结果大小,所以无法为每个查询结果精确分配大小恰好匹配的缓存空间。
MySQL缓存机制采用的是边查边存,动态的去申请缓存内存。
一条SQL查询缓存分配内存过程是怎么样的?
当有查询结果需要缓存的时候,MySQL缓存机制会在SQL查询开始(还未得到结果)时就去申请一块内存空间(小数据块),在不断查询中,如果发现不够则继续申请,如果存储完时有空余则释放多余的内存空间。
如果余下的需要回收的空间很小,小于query_cache_min_res_unit,不能再次被使用,可能会造成内存碎片,影响查询性能。
面试官考点之缓存中的内存碎片无法避免,那么有什么办法优化吗?
没有什么办法能够完全避免内存碎片,但是选择合适的
query_cache_min_res_unit
可以减少由碎片导致的内存空间浪费。
值太小,则浪费的空间更少,但是会导致频繁的内存块申请操作
如果设置得太大,那么碎片会很多
调整合适的值其实是在平衡内存浪费和CPU消耗
那么我如何确定这个平衡值?
可以通过内存实际消耗,计算单个查询的平均缓存大小
(query_cache_size - Qcache_free_memory)/ Qcache_queries_in_cahce
通过查看闲置内存块数量(Qcahce_free_blocks)来观察碎片。
如果产生的碎片过多,通过什么方法可以整理碎片?
通过FLUSH_QUERY_CAHCE清理碎片
这个命令将所有的查询缓存重新排序,
并将所有的空闲空间都聚焦到查询缓存的一块区域上。
面试官考点之MySQL4.0提出了查询缓存,它设计出来是为了加速哪些查询场景?
1、并发性和查询QPS不高 2、被访问的底层数据本质上是静态或半静态的 3、查询密集型应用,更新频率非常低而只读查询频率非常高的场景
面试官考点之MySQL5.6中默认禁用,8.0以后完全移除,造成这个改变的原因是什么?
理想情况下,上述查询场景非常适合使用查询缓存,但是实际的业务系统都是有CRUD操作的。
在MySQL里QC是由一个全局锁在控制,每次更新QC的内存块都需要进行锁定,数据更新频繁,就会不断的失效缓存操作,同时缓存失效会造成大量的查询缓存碎片化,还会导致服务器的负载升高,影响数据库的稳定性。
所以MySQL官方经过抉择,果断移除了查询缓存模块。
面试官考点之生产环境要不要开启MySQL缓存?
建议不开启
根据MySQL官方的测试,如果对一个表执行简单的查询,
设置每次查询都不一样,
打开QC后,性能反而下降了13%左右
当然实际业务中,不会都是这种不同的请求,因此实际影响应该比这个小一些。
MySQL查询缓存的目的是为了提升查询性能,但它本身也是有性能开销的。
需要在合适的业务场景下(读写压力模型)使用
不合适的业务场景不但不能提升查询性能,查询缓存反而会变成MySQL的瓶颈。
对写密集型的应用场景来说,禁用缓存反而提高性能。
随缘更新,整理不易,欢迎联系小白讨论,大神巴巴请绕路!
更多精彩内容,欢迎关注微信公众号:囧么肥事 (或搜索:jiongmefeishi)
《MySQL面试小抄》查询缓存机制终面的更多相关文章
- 《MySQL面试小抄》索引考点二面总结
<MySQL面试小抄>索引考点二面总结 我是肥哥,一名不专业的面试官! 我是囧囧,一名积极找工作的小菜鸟! 囧囧表示:小白面试最怕的就是面试官问的知识点太笼统,自己无法快速定位到关键问题点 ...
- 《MySQL面试小抄》索引考点一面总结
<MySQL面试小抄>索引考点一面总结 我是肥哥,一名不专业的面试官! 我是囧囧,一名积极找工作的小菜鸟 囧囧表示:面试最怕的就是面试官问的知识点太笼统,自己无法快速定位到关键问题点!!! ...
- 《MySQL面试小抄》索引失效场景验证
我是肥哥,一名不专业的面试官! 我是囧囧,一名积极找工作的小菜鸟! 囧囧表示:小白面试最怕的就是面试官问的知识点太笼统,自己无法快速定位到关键问题点!!! 本期主要面试考点 面试官考点之什么情况下会索 ...
- MySQL 查询缓存机制(MySQL数据库调优)
查询缓存机制:缓存的是查询语句的整个查询结果,是一个完整的select语句的缓存结果 哪些查询可能不会被缓存 :查询中包含UDF.存储函数.用户自定义变量.临时表.mysql库中系统表.或者包含列级别 ...
- MySQL/MariaDB数据库的查询缓存优化
MySQL/MariaDB数据库的查询缓存优化 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.MySQL架构 Connectors(MySQL对外提供的交互接口,API): ...
- day06 内存地址 小数据池缓存机制
1. 内存相关 示例一 v1=[11,22,33] v2=[11,22,33] #值相等 内存地址不等 v1=11 v2=11 #按理说内存地址应该不等,但是python为了优化使其内存地址相等 v1 ...
- mysql(五)查询缓存
mysql的逻辑架构图如下: 当开启查询缓存时,mysql会将查询结果缓存到查询缓存区域,结果对应的key是使用查询语句,数据库名称,客户端协议的版本等因素算出的一个hash值. 在下次查询时,根据一 ...
- Mysql优化之——启用查询缓存
启用MySQL查询缓存可以极大地减低数据库服务器的CPU使用率,实际使用情况是:开启前CPU使用率120%左右,开启后降到了10%. 查看查询缓存情况: mysql> show variable ...
- 解决小程序webview缓存机制
在打开webview的时候在地址后面加上随机数或者字符串 并且H5页面使用文件hash
随机推荐
- Hive千亿级数据倾斜解决方案
数据倾斜问题剖析 数据倾斜是分布式系统不可避免的问题,任何分布式系统都有几率发生数据倾斜,但有些小伙伴在平时工作中感知不是很明显,这里要注意本篇文章的标题-"千亿级数据",为什么说 ...
- 1.4.15- HTML标签之链接标签
代码如下: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF ...
- Git 常用命令总结,将会持续更新
平常在windows电脑上使用Git Extensions 工具比较多,大部分的常用指令都可以通过点点点就可以完成.在mac电脑上的话使用sourcetree工具.但有时候也会直接通过git命令,很多 ...
- hdu4845 状态压缩BFS
题意: 给一个n*m的矩阵,从11,走到nm,格子和格子之间可能有墙,也可能有门,有的格子上面有钥匙,相应的钥匙开相应的们,捡钥匙和开门都不需要时间,问你最少多少部能走到nm. 思路: ...
- CVE-2010-3333:Microsoft RTF 栈溢出漏洞调试分析
0x01 前言 CVE-2010-3333 漏洞是一个栈溢出漏洞,该漏洞是由于 Microsoft文档在处理 RTF 数据的对数据解析处理错误,在进行内存操作时没有对操作的数据进行长度限制,导致存在内 ...
- Linux-鸟菜-6-文件与目录管理
Linux-鸟菜-6-文件与目录管理 这章主要是说一些对目录和文件的增删改查等等命令. . 代表当前目录 .. 代表前一个目录 / 的 . 和 .. 一样 - 代表前一个工作目录 ...
- svn客户端访问失败,错误“请求的名称有效,但是找不到请求的类型”的解决
1.问题描述:visualSVN客户端在其他机子访问出现以下问题(服务端装在我的电脑上,我本机客户端可以正常访问) 2. 原因分析:SVN客户端访问服务器需要输入URL地址,URL地址分为两种方式.一 ...
- Python 基础教程 —— Pandas 库常用方法实例说明
目录 1. 常用方法 pandas.Series 2. pandas.DataFrame ([data],[index]) 根据行建立数据 3. pandas.DataFrame ({dic}) ...
- c语言编程学习之字符串
字符串字面量与字符变量 1.字符串字面量 字符串字面量是一对双引号括起来的字符序列.当c语言编译器在程序中遇到长度为n的字符串字面量时,它会为字符串字面量分配长度为n+1的内存空间.这块内存空间用来存 ...
- 软负载Nginx和硬负载F5的优缺点对比
对于数据流量过大的网络中,往往单一设备无法承担,需要多台设备进行数据分流,而负载均衡器就是用来将数据分流到多台设备的一个转发器. a.软件负载均衡解决方案 在一台服务器的操作系统上,安装一个附加软件 ...