count(*)这么慢,我该怎么办?
1)计算一个表有多少行数用什么命令?
select count(*) from t
2)count(*)底层是怎样实现的?
在MYISAM中,是把这个总行数存到磁盘中去的,要的时候直接去读就行,特别快。
而在InnoDB引擎中,这个总数是需要去一行一行的扫描表,然后累加起来看有多少行。所以当数据量大之后,count(*)就变慢了。
3)为什么InnoDB引擎不像MYISAM一样把总数直接存到磁盘中?
总数是不断变化的,并且InnoDB还有MVCC多版本并发控制,每一行都要判断对当前这个会话是否可见,每个会话下面读到的值可能都不一样。变数比较大,所以不能写死 。
4)针对InnoDB这种引擎,要想快速读取count(*),有什么优化方案吗?
可以考虑用redis来存总数,插入一行总数+1,删除一行-1。但是用redis的话 不能保证数据的一致性,有可能有些计数没有保存但是redis挂掉了。
针对redis挂掉会造成数据一致性问题我们考虑直接将这个总数放在数据库某张表中存起来,这样即使数据库挂了,重启之后也是能恢复数据的。
5)MYSQL对count(*)一点优化都没有吗 ?
还是有点优化的,我们知道主键索引存的是整行记录,非主键索引存的是主键值。那非主键索引生成的这棵树是远远要小于主键索引这棵树的。我count(*)走主键索引查和走非主键索引查,得到的结果都是一样的,那我当然走树小的非主键索引这棵。
6)有一个命令是show table state,他查出来的里面有个TABLE_ROWS值,那我们可不可以用这个命令来代替count(*)呢?
当然不可以,show table state他算总数的话是估算,误差是比较大的,一半的误差左右。
7)MYISAM虽然查总数快,但不支持事务,show table state呢又不精准,count(*)呢又会有性能问题,那现在我有一个页面要经常显示总数,那我们该怎么办?
自己计数。找一个地方,把总数存起来。就是我们4)中的两个方案。
8)count(*),count(1),count(字段),count(主键id)有什么区别?
下面的引擎都指的是InnoDB
count(1) :引擎扫描全表,但不取值,直接全部丢给server层去。server 层对于返回的每一行,放一个数字“1”进去,判断是不可能为空的,加起来的结果就是总数。
count(主键 id):引擎扫描全表 ,把id值取出来,返回给server层。到了server层之后,server层把id不为空的加起来就是结果。
count(字段):引擎扫描,一行一行取出来,然后拿给server层。
如果这个字段定位为not null:那server层直接数有多少行
如果这个字段可以为null:server层看返回的这些行,字段不为空的那就累加起来返回。
count(*):MYSQL有优化,确保行中肯定不为null,所以直接数有多少行,这个速度还是挺快的,所以我们首选还是得这个。
count(*)这么慢,我该怎么办?的更多相关文章
- nodejs api 中文文档
文档首页 英文版文档 本作品采用知识共享署名-非商业性使用 3.0 未本地化版本许可协议进行许可. Node.js v0.10.18 手册 & 文档 索引 | 在单一页面中浏览 | JSON格 ...
- C#中Length和Count的区别(个人观点)
这篇文章将会很短...短到比你的JJ还短,当然开玩笑了.网上有说过Length和count的区别,都是很含糊的,我没有发现有 文章说得比较透彻的,所以,虽然这篇文章很短,我还是希望能留在首页,听听大家 ...
- [PHP源码阅读]count函数
在PHP编程中,在遍历数组的时候经常需要先计算数组的长度作为循环结束的判断条件,而在PHP里面对数组的操作是很频繁的,因此count也算是一个常用函数,下面研究一下count函数的具体实现. 我在gi ...
- EntityFramework.Extended 实现 update count+=1
在使用 EF 的时候,EntityFramework.Extended 的作用:使IQueryable<T>转换为update table set ...,这样使我们在修改实体对象的时候, ...
- 学习笔记 MYSQL报错注入(count()、rand()、group by)
首先看下常见的攻击载荷,如下: select count(*),(floor(rand(0)*2))x from table group by x; 然后对于攻击载荷进行解释, floor(rand( ...
- count(*) 与count (字段名)的区别
count(*) 查出来的是:结果集的总条数 count(字段名) 查出来的是: 结果集中'字段名'不为空的记录的总条数
- BZOJ 2588: Spoj 10628. Count on a tree [树上主席树]
2588: Spoj 10628. Count on a tree Time Limit: 12 Sec Memory Limit: 128 MBSubmit: 5217 Solved: 1233 ...
- [LeetCode] Count Numbers with Unique Digits 计算各位不相同的数字个数
Given a non-negative integer n, count all numbers with unique digits, x, where 0 ≤ x < 10n. Examp ...
- [LeetCode] Count of Range Sum 区间和计数
Given an integer array nums, return the number of range sums that lie in [lower, upper] inclusive.Ra ...
- [LeetCode] Count of Smaller Numbers After Self 计算后面较小数字的个数
You are given an integer array nums and you have to return a new counts array. The counts array has ...
随机推荐
- 《手把手教你》系列技巧篇(六十七)-java+ selenium自动化测试 - 读写excel文件 - 中篇(详细教程)
1.简介 前面介绍了POI可以操作excel,也简单的提到另一个操作excle的工具,本篇介绍一个其他的可以操作excel的工具,但是这个工具有一个前提,excel文件版本只能是97-2003版本,如 ...
- socket 套接字编程
今日内容 socket 套接字编程 简易服务端与客户端代码实现 通信循环 黏包现象(TCP协议) 报头制作.struct 模块.封装形式 内容详细 一.socket 套接字编程 实现一款能够进行数据交 ...
- time模块以及datetime模块
内容概要 time模块 **timestamp时间戳 **struct_time结构化时间 **format time格式化时间 datetime模块 **date **time **datetime ...
- Python:pathlib模块
Blog:博客园 个人 关于panthlib模块 pathlib模块提供表示文件系统路径的类,其语义适用于不同的操作系统.路径类被分为提供纯计算操作而没有 I/O 的纯路径,以及从纯路径继承而来但提供 ...
- Linux之history使用技巧
背景: 正常情况下,Linux系统中输入 history 只显示序号和历史命令如下图,但是当我们想要根据历史命令来排查一些故障问题时,无法精确获取该命令执行的详细信息,包括执行时间.执行的用户.是哪 ...
- Spark学习记录
SpringStrongGuo Hadoop与Spark Hadoop主要解决,海量数据的存储和海量数据的分析计算. Spark主要解决海量数据的分析计算. Spark运行模式 1)Local:运行在 ...
- 更快的网络文件系統 — Oxfs
什麽时候需要网络文件系统 ? 做嵌入式的同学经常会使用 NFS 将 host 上的某个目录挂载到开发板上,方便 host 上编译构建后能直接在板子上运行,减少手工拷贝操作.网站开发时,在 host 上 ...
- 【windwos 操作系统】关键的Windows内核数据结构一览(下)
I/O管理器 nt!_IRP IRP表示一个I/O请求包结构体,它用来封装执行一个特定I/O操作所需要的所有参数以及I/O操作的状态.IRP的表现也类似于一个线程独立调用栈因此它可以从一个线程传递到另 ...
- 点击弹出div内容包括遮罩层
效果: HTML: <!-- 添加分组按钮 --> <div class="group_add" onclick = "docu ...
- Weisfeiler-Lehman(WL) 算法和WL Test
Weisfeiler-Lehman 算法 很多论文中会讲,从另一个角度来讲,GCN模型可以看作图上非常有名的 Weisfeiler-Lehman 算法的一种变形.那么什么是 Weisfeiler-Le ...