mysql的join连接查询优化经历
工作中接开发主管反馈,有个资讯接口调用时有出现响应较慢,需要优化。
接口返回有时较慢??第一反应是接口的redis缓存过期时有大量请求穿过redis缓存,对mysql访问压力较大造成的。
先看PHP代码,逻辑不复杂,首先根据传入的资讯类型id,从redis获取资讯缓存,没有就读取mysql同时更新redis缓存,缓存有效期3-5分钟。
大概定位在mysql查询这块,然后上阿里云后台发现mysql慢查询记录。
表结构:
资讯分类表
CREATE TABLE `article_cats` (
`id` INT(11) NOT NULL AUTO_INCREMENT,
`name` VARCHAR(50) NOT NULL COMMENT '分类名',
`pid` INT(11) NOT NULL DEFAULT '',
`type` TINYINT(4) NOT NULL DEFAULT '' COMMENT '类型(0文章1视频)',
`img_url` VARCHAR(300) NOT NULL COMMENT '类别ICON',
`sort` INT(11) NOT NULL DEFAULT '' COMMENT '排序(数值越大越靠前)',
PRIMARY KEY (`id`),
UNIQUE INDEX `name` (`name`),
INDEX `sort` (`sort`)
)
COMMENT='文章分类表'
COLLATE='utf8_general_ci'
ENGINE=InnoDB
AUTO_INCREMENT=106;
资讯表
CREATE TABLE `article` (
`id` INT(11) NOT NULL AUTO_INCREMENT COMMENT 'id',
`type` TINYINT(1) UNSIGNED ZEROFILL NULL DEFAULT NULL COMMENT '类型',
`title` VARCHAR(500) NOT NULL COMMENT '标题',
`abstract` VARCHAR(255) NULL DEFAULT '' COMMENT '摘要',
`own` VARCHAR(50) NULL DEFAULT NULL,
`url_md5` VARCHAR(200) NULL DEFAULT NULL COMMENT '文章URL',
`live_status` TINYINT(1) NULL DEFAULT '' COMMENT '显示类型 1 web显示,2 app显示,3 全显示,4 全不显示',
`status` TINYINT(1) NULL DEFAULT '' COMMENT '状态,1正常,-1删除',
`grab_time` DATETIME NULL DEFAULT NULL COMMENT '采集第3方时间',
`img_url` VARCHAR(200) NULL DEFAULT '',
`sort` INT(11) NULL DEFAULT '' COMMENT '文章排序',
`last_own` VARCHAR(20) NULL DEFAULT NULL COMMENT '最后编辑者帐号',
`url` VARCHAR(200) NULL DEFAULT NULL,
`level` TINYINT(4) NULL DEFAULT '' COMMENT '快讯的重要程度:1不重要,2一般,3重要',
`share_num` INT(10) UNSIGNED NOT NULL DEFAULT '' COMMENT '分享数',
`status_level` TINYINT(3) UNSIGNED NOT NULL DEFAULT '' COMMENT '置顶状态',PRIMARY KEY (`id`),
INDEX `title` (`title`(255)),
INDEX `status` (`status`),
INDEX `grab_time` (`grab_time`),
INDEX `t_l_s` (`type`, `live_status`, `status`),
INDEX `type` (`type`, `status`, `live_status`),
INDEX `live_status` (`live_status`, `status_level`),
INDEX `Index 11` (`sort`)
) COMMENT='文章表'
COLLATE='utf8_general_ci'
ENGINE=InnoDB
AUTO_INCREMENT=537710;
查询sql:
SELECT a.id,a.title,a.img_url,ac.type actype,a.template,a.sort,a.grab_time,a.type as type_id,a.abstract,ac.name as type,ac.img_url as cat_img_url FROM article a left join article_cats ac on a.type = ac.id WHERE ( a.status = 1 ) AND ( ac.pid = 25 ) ORDER BY a.id DESC LIMIT 0,20
/* Affected rows: 0 已找到记录: 20 警告: 0 持续时间 1 query: 0.328 sec. (+ 0.016 sec. network) */
查询结果显示耗时0.3秒,这样的时间间隔在大量请求穿透redis缓存直接访问mysql时肯定会对接口有影响。
用explain执行sql得到如下分析结果:

其中possible_keys列指出MySQL能使用哪个索引在该表中找到行,key列显示MySQL实际决定使用的键(索引)。
可以看到mysql服务端自做判断使用status索引,但status只分两种情况,1和-1,区分度不大,索引用起来效果不佳(当时也不知道谁对status字段建了索引。。。)。
我们可以强制mysql使用区分度大的索引和字段。
这里我们还有type索引:
`type` (`type`, `status`, `live_status`)
加上强制使用的索引sql变成如下
SELECT a.id,a.title,a.img_url,ac.type actype,a.template,a.sort,a.grab_time,a.type as type_id,a.abstract,ac.name as type,ac.img_url as cat_img_url FROM article a force index(type) left join article_cats ac on a.type = ac.id WHERE ( a.status = 1 ) AND ( ac.pid = 25 )
/* Affected rows: 0 已找到记录: 20 警告: 0 持续时间 1 query: 0.015 sec. (+ 0.016 sec. network) */
查询结果显示耗时0.015秒,查询效率有了很大提升。
再用explain分析

可以发现ac表走全表扫描(资讯类型表一百来号数据),a表使用type索引。
改完后测试环境测试完成么问题,下周来上线。
explain关键字是项目开发过程的一件sql效率提优利器,写sql,特别是联合查询,字表查询之类的时候还是大有裨益。
mysql的join连接查询优化经历的更多相关文章
- MySQL的JOIN连接
MySQL的JOIN join的含义跟英文单词"join"一样,连接连接两张表.分为 内连接:inner join 外连接 (1)左外连接(左边的表不加限制):left joi ...
- 一张图看懂Mysql的join连接
INNER JOIN:当两个表中都匹配时返回行. LEFT JOIN:返回左表中的所有行,即使右表中没有匹配项也是如此. RIGHT JOIN:返回右表中的所有行,即使左表中没有匹配项也是如此. FU ...
- mysql各种join连接查询
最近项目用到了几次sql join查询 来满足银行变态的需求:正好晚上自学时,看到了相关视频,所以记录下相关知识,下次再用时,根据如下图片,便可知道 怎么写sql; 注意点: 在join操作中的 on ...
- MySQL之表、列别名及各种JOIN连接详解
MySQL在SQL中,合理的别名可以让SQL更容易以及可读性更高.别名使用as来表示,可以分为表别名和列别名,别名应该是先定义后使用才对,所以首先要了解sql的执行顺序(1) from(2) on(3 ...
- MySQL--7种join连接
一,定义: 1)LEFT JOIN / LEFT OUTER JOIN:左外连接 左向外连接的结果集包括:LEFT OUTER子句中指定的左表的所有行,而不仅仅是连接列所匹配的行.如果左表的某行在右表 ...
- MySQL索引原理以及查询优化
转载自:https://www.cnblogs.com/bypp/p/7755307.html MySQL索引原理以及查询优化 一.介绍 1.什么是索引? 一般的应用系统,读写比例在10:1左右,而且 ...
- mysql 索引原理及查询优化 -转载
转载自 mysql 索引原理及查询优化 https://www.cnblogs.com/panfb/p/8043681.html 潘红伟 mysql 索引原理及查询优化 一 介绍 为何要有索引? ...
- MySQL实验 内连接优化order by+limit 以及添加索引再次改进
MySQL实验 内连接优化order by+limit 以及添加索引再次改进 在进行子查询优化双参数limit时我萌生了测试更加符合实际生产需要的ORDER BY + LIMIT的想法,或许我们也可以 ...
- mysql优化之连接优化(open-files-limit与table_open_cache)
MySQL打开的文件描述符限制 Can't open file: '.\test\mytable.frm' (errno: 24) OS error code : Too many open file ...
随机推荐
- DOORS的引用类型
DOORS的引用类型包括:Project: 项目引用Folder: 文件夹引用Item: 项目或文件夹之内的项(项目.文件夹.模块)Module: 打开模块的引用Object: 对象的引用 ...
- DataGridViewComboBoxColumn值无效解决方法
值无效,可能是你下拉框选项,没有这样的值,而你却设置这个值. dataGridView1.Rows[i].Cells[1].Value = "选项一"; 解决方法就是在窗体的构造函 ...
- Pi 实现VLC网络视频监控
安装摄像头 将Pi的原装摄像头安装在pi上面 ssh连接pi 通过xshell或者putty等工具连接ssh 安装VLC $ sudo apt-get update $ sudo apt-get in ...
- 【总结】 BZOJ前100题总结
前言 最近发现自己trl,所以要多做题目但是Tham布置的题目一道都不会,只能来写BZOJ HA(蛤)OI 1041 复数可以分解成两个点,所以直接把\(R^2\)质因数分解一下就可以了,注意计算每一 ...
- Kubernetes 集群安装部署
etcd集群配置 master节点配置 1.安装kubernetes etcd [root@k8s ~]# yum -y install kubernetes-master etcd 2.配置 etc ...
- shell、cmd、dos和脚本语言区别和联系
问题一:DOS与windows中cmd区别 在windows系统中,“开始-运行-cmd”可以打开“cmd.exe”,进行命令行操作. 操作系统可以分成核心(kernel)和Shell(外壳)两部 ...
- java.lang.IncompatibleClassChangeError:可以考虑是否是jar包冲突
一.背景:启动tomcat的时候,报错: java.lang.IncompatibleClassChangeError: class org.springframework.core.type.cla ...
- 白帽hacker酷炫小技能大盘点!
白帽子是谁? 他们与一行行代码打交道,在“0”和“1”的世界中寻找风险,在IT产业软硬件核心技术和代码等自主研发能力不足.安全防护手段滞后.地下黑客业务已形成产业链的背景下,我国网络安全正面临日益严峻 ...
- nginx的几种负载均衡策略
转自https://www.cnblogs.com/1214804270hacker/p/9325150.html 一.关于Nginx的负载均衡 在服务器集群中,Nginx起到一个代理服务器的角色(即 ...
- C++多线程编程二
1. 死锁与解锁: #include <iostream> #include <thread> #include <mutex> using namespace s ...