你设计的应用是IO依赖型还是CPU依赖型?
这个话题可能看起来非常枯燥,但它对mysql的性能优化非常重要。
其实我在MYSQL
咨询工作中无时无刻接不在接触这类问题。
IO工作负载与cpu依赖全然不同,尤其是当你的工作集(通常仅仅有数据库的一小部分)载入内存的时候。当数据在内存中时读取是很快的。假设不在内存中,则很缓慢。
比如。当你查询分析10000行数据时,假设这10000行所有载入在内存中,则仅仅须要很短时间;可是假设到磁盘上去读的话,我们假设仅仅有10%也就是仅仅须要1000次随机读操作的情况下,这个查询也要花费至少5到10秒,或者在已经超负荷的情况下可能花费很多其它的时间。
所以在设计应用的时候就应当考虑你的应用属于哪种类型?能否让应用充分利用CPU或者内存?假设是的话。那么不论什么种类的困难都不复存在。并且你也许能够採用更easy实现的解决方式。但当你设计CPU依赖型应用的时候要注意。当它规模过大时你可能负担不起更大的内存需求。同一时候性能还会急剧下降,并且随着复杂变化的发生你的应用訪问速度可能变得糟糕。
CPU依赖在处理大量数据时比IO依赖更有优势:Count查询,分组查询,无索引排序。搜索查询等。基本上查询分析超过100行数据并且是“随机訪问”大数据量的表(这种情况下,须要频繁的物理IO操作)我想强调的是,这种查询可能会遇到性能问题。
同一时候,也不要仅仅看“典型”案例,在非常多情况下性能方面的问题可能就是这最糟糕的5%导致的。
让我来举个简单的样例来说明一下。假设你的应用中用户之间有某种格式的通信。
您可能希望显示用户未读消息数以及邮箱中的邮件总数来至少“画出页面”,简单的解决方式是运行select count(*) from messages where user_id=134 语句或者在祝查询中使用SQL_CALC_FOUND_ROWS标记来查询相关数据。假设你的应用是CPU依赖型,那么你可能须要做的就是在数据库之上做一次缓存;假设你的应用为IO依赖型。那么你可能会有麻烦,即使邮箱中仅仅有1000条信息也会使速度变慢。
如果如今你有一部分很活跃的用户。他们的邮箱中邮件数可能许多。达到一个极端,那么载入这些信息将花费很长时间--产生的负载也比普通用户多。并且由于他们对整个应用的贡献很大所以你不想由于页面载入慢而激怒这部分用户。
所以,对于IO依赖型应用,你须要创建字段来记录信息总数、已读信息数等;须要确保同步更新这新字段(如使用触发器);确保全部查询使用order by ... limit语句索引。
对于IO依赖型应用来说。聚集索引(数据本地化)也是非常重要的--假设使用的是Innodb引擎的表。使用被auto_increment标记的自增列作索引非常可能比使用如(user_id,sub_id)这样的符合主键要慢,这是由于这样的索引能够将user_id同样的信息聚集起来并且通常同意通过非常少物理IO来查询这些数据。
你可能会觉得你在CPU依赖型设计场景中也会碰到这类问题--是的。可是你可能是在100,000条信息的时候遇到性能问题而不是像IO依赖型应用中在100条信息的时候就会碰到这个问题。而这100,000条对大多数应用来说已经够用了。不用去过多考虑这个问题。
1. 本文由程序猿学架构翻译
2. 本文译自Are you designing IO bound or CPU bound application ? | MySQL Performance Blog
3. 转载请务必注明本文出自:程序猿学架构(微信号:archleaner
)
4. 很多其它文章请扫码:
你设计的应用是IO依赖型还是CPU依赖型?的更多相关文章
- CPU被夺走的三种状态 执行时间久了 IO操作让cpu等待 被优先级高的抢占
CPU被夺走的三种状态 执行时间久了 IO操作让cpu等待 被优先级高的抢占
- erl0001-Erlang 设计原则 process port io
Erlang原理 (转载自ITEYE cryolite博客 ps:精彩)by Robert Virding This is a description of some of the basic pro ...
- 响应式设计工具网站mydevice.io
1.网址 https://mydevice.io/ 2.使用 在mydevice.io上有常见智能手机,PC电脑的尺寸.
- 《计算机组成与体系结构:性能设计》读后小记 12、CPU的结构和功能
一.CPU组成 1.组成: ALU:算术逻辑单元,完成数据的实际计算或处理 控制器:控制数据的移入移出CPU 寄存器:由一组存储位置极小的内部存储器组成 CPU内部总线:在各寄存器和ALU之间传送数据 ...
- [连载]《C#通讯(串口和网络)框架的设计与实现》-3.设备驱动的设计
目 录 第三章 设备驱动的设计... 2 3.1 初始化设备... 4 3.2 运行设备接口设计... 4 3.3 ...
- Java中 NIO与IO的区别
当学习了Java NIO和IO的API后,一个问题马上涌入脑海: 我应该何时使用IO,何时使用NIO呢?在本文中,我会尽量清晰地解析Java NIO和IO的差异.它们的使用场景,以及它们如何影响您的代 ...
- io端口与io内存详解
(一)地址的概念 1)物理地址:CPU地址总线传来的地址,由硬件电路控制其具体含义.物理地址中很大一部分是留给内存条中的内存的,但也常被映射到其他存储器上(如显存.BIOS等).在程序指令中的虚拟地址 ...
- java nio 与io区别
转自:http://blog.csdn.net/keda8997110/article/details/19549493 当学习了Java NIO和IO的API后,一个问题马上涌入脑海: 我应该何时使 ...
- IO流02--毕向东JAVA基础教程视频学习笔记
提要 08 自定义装饰类09 LineNumberReader10 MyLineNumberReader11 字节流File读写操作12 拷贝图片13 字节流的缓冲区14 自定义字节流的缓冲区-rea ...
随机推荐
- 图像视图-ImageView
(一) 知识点: (1)imageView.setImageAlpha(Alpha):设置图片透明度 (2)在布局imageView中设置图片位置:android:scaleType="ce ...
- 今天升级Xcode 7.0 bata发现网络访问失败。
今天升级Xcode 7.0 bata发现网络访问失败.输出错误信息 The resource could not be loaded because the App Transport Securit ...
- 扑克模拟,牌型判断java版
Card类 package com.company; public class Card { private String color; private Integer value; public S ...
- RedisTemplate SerializationFailedException: Failed to deserialize payload 异常解决
问题描述: 使用RedisTemplate(spring-data-redis )进行redis操作的封装 , 现有一个incr的key , 当调用incr后返回值一切正常, 当对此key进行get调 ...
- 【Git】GitHub for Windows使用(2) 分支
目录 1.回看客户端相关功能 2.新建一个分支 3.在新分支上修改文件 4.上传新建分支上的修改,并合并分支 5.删除分支 1.回看客户端相关功能 看看设置中的以下内容 2.新建一个分支 3.在新分支 ...
- PHP图片的类型将其自动编码成base64
<!--根据图片的类型将其自动编码成base64--><html><head><?php$file="test.jpg";$type=ge ...
- react使用引入svg的icon;svg图形制作
由于手头的icon有限,需要使用更多的图标,就得找外援: 1.react安装icon插件,使用插件里已经有的图标 https://react-icons.netlify.com/#/ React Ic ...
- LVM分区管理和扩展
一.LVM简介 LVM是 Logical Volume Manager(逻辑卷管理)的简写.LVM将一个或多个硬盘的分区在逻辑上集合,相当于一个大硬盘来使用,当硬盘的空间不够使用的时候,可以继续将其它 ...
- ubuntu16.04_install_saltstack_更新版本
一.ubuntu16.04版本,安装saltstack 参考官方文档: https://repo.saltstack.com/#ubuntu 二.安装方法 Installs the latest re ...
- nagios学习记录
这几天开始接触nagios,记录下学习的心得 监控机上需要安装nagios,nagios-plugins, nrpe 被监控机上需要安装nagios-plugins, nrpe nagios通过插件n ...