1、起因

某日下午18:40开始，接收到滕讯云短信报警，显示数据库CPU使用率已超过100%，同时慢查询日志的条数有1500条左右。

正常情况下：CPU使用率为30%-40%之间，慢查询日志条数为0.

2、查询原因

因接收短信时，正好在回家的路上，无法处理，所以只能到家再处理。

在路上的时候，接收了几次恢复短信和再次异常短信。说明问题是一时有，一时恢复。

到家后，登录腾讯云数据库控制台，查询监控，发现CPU使用率确实为145%，且持续时间是20分钟。

18:40-19:00

19:20-19:40

然后，我登录腾讯云的phpMyAdmin控制台，想尝试看下有哪些查询正在发生。于是执行了show processlist命令，不巧的是，我执行命令的时候，高峰期已过，看不到任何查询。

于是，我下载了18:00-19:00之间的慢查询日志文件，想从中找到问题。下载之后，发现第一条慢查询开始的时间正是18:41分钟。且查看整个文件，发现都是同一条SQL语句，查询的是同一张表，且uid始终是同一个。

由于我对于业务不是很熟悉，于是我将这些SQL语句截图发给了开发人员。开发人员在看到SQL语句后，找到了相应的代码位置，并告诉了我，引发该SQL查询的原因是请求了某个地址，/account/...。

然后我下载了负载均衡的访问日志，只下载了18:00-19:00时间段的。我根据开发人员提供的URI，查询日志，发现真有记录。

然后，我尝试过滤该日志，以确定访问地址。我首先过滤整个日志，以统计/account/...出现的数量。发现数量为7900条。为了得知这7900条是否为18:00-19:00出现的，于是我单独过滤了日志中带"18:4"字符串的数量以及"19:5"字符串的数量。发现两者加起来的数量为7600条。说明这7900条请求确实是从18:40-19:00这个时间段开始发起的。

且很明显的是，所有请求来自同一个IP地址。原因很明显了，就是某个白痴在发起异常请求。

3、处理办法

首先在负载均衡的防火墙上限制了该IP的访问。然后开发人员也加上了CSRF。

记录一次MySQL数据库CPU负载异常高的问题的更多相关文章

  1. MySQL数据库CPU飙升紧急处理方法

    MySQL数据库CPU飙升紧急处理方法 运行平稳的数据库,如果遇到CPU狂飙,到80%左右,那一定是开发写的烂SQL导致的,DBA首先要保证的是,数据库别跑挂了,所以我们要把那些运行慢的SQL杀死并记 ...

  2. 【Nginx】如何使用Nginx实现MySQL数据库的负载均衡？看完我懂了！！

    写在前面 Nginx能够实现HTTP.HTTPS协议的负载均衡,也能够实现TCP协议的负载均衡.那么,问题来了,可不可以通过Nginx实现MySQL数据库的负载均衡呢?答案是:可以.接下来,就让我们一 ...

  3. CPU负载过高异常排查实践与总结

    昨天下午突然收到运维邮件报警,显示数据平台服务器cpu利用率达到了98.94%,而且最近一段时间一直持续在70%以上,看起来像是硬件资源到瓶颈需要扩容了,但仔细思考就会发现咱们的业务系统并不是一个高并 ...

  4. 查询mysql数据库启动时间抛异常

    mysql 5.7.10使用dbforget Studio 连接异常 提示:The'INFORMATION_SCHEMA.SESSION_VARIABLES' feature is dis 查看mys ...

  5. 记录--linux下mysql数据库问题

    本次主要记录一下linux下mysql数据库的一些问题,也是之前经常用到的知识,这里简单总结一些问题,方便自己以后的回顾.原来一直使用的是阿里云的RDS数据库mysql版,主要是因为上次阿里云做活动可 ...

  6. 服务器cpu负载过高问题排查

    https://blog.csdn.net/MrZhangXL/article/details/77711996 第一步 :执行top命令,查出当前机器线程情况 top - 09:14:36 up 1 ...

  7. [Oracle]Oracle数据库CPU利用率很高解决方案

    Oracle数据库经常会遇到CPU利用率很高的情况,这种时候大都是数据库中存在着严重性能低下的SQL语句,这种SQL语句大大的消耗了CPU资源,导致整个系统性能低下.当然,引起严重性能低下的SQL语句 ...

  8. [ Mariadb ] 记录一次MySQL数据库时区的问题

    操作系统:Centos 7数据库:5.5.52-MariaDB 根本问题:由于系统时区不对,造成数据库的时区和数据的时间不正确. 处理办法: # 查看系统时区, [root@mongodb ~]# t ...

  9. springboot整合mybatis连接mysql数据库出现SQLException异常

    在springboot整合mybatis连接数据库的时候,项目中遇到一个SQLException,我检查了properties配置文件,看数据源有没有配错,检查有没有打错字,在数据库中把sql语句查询 ...

随机推荐

  1. JUC源码分析-集合篇（七）PriorityBlockingQueue

    JUC源码分析-集合篇(七)PriorityBlockingQueue PriorityBlockingQueue 是带优先级的无界阻塞队列,每次出队都返回优先级最高的元素,是二叉树最小堆的实现. P ...

  2. docker container 的操作

    删除所有退出的容器 docker container rm $(docker ps -aq)

  3. mysql高效导入导出load data [infile][outfile]用法

    一.MySQL高效导入数据的方法load data infile load data infile语句从一个文本文件中以很高的速度读入一个表中.使用这个命令之前,mysqld进程(服务)必须已经在运行 ...

  4. python-selenium -- 弹出框处理

    弹出框有两种:页面弹出框(可定位元素能操作).Windows弹出框(不能直接定位) 一.页面弹出框 等待弹出框出现之后,定位弹出框,操作其中元素 如: driver = webdriver.Chrom ...

  5. 三.Python数据类型详述

    Python第三节数据类型详述 一.多变量赋值 python允许多变量赋值 多变量赋相同的值a = b = c = 1 多变量赋不同的值a, b, c = 1, 2, "fuckyou&qu ...

  6. element ui 弹出组件的遮罩层在弹出层的上面的解决方法

    <el-dialog title="收货地址" :visible.sync="dialogFormVisible" :modal-append-to-bo ...

  7. 逻辑右移函数 srl()与算术右移函数 sra() （转）

    比如一个有符号位的8位二进制数11001101,逻辑右移就不管符号位,如果移一位就变成01100110.算术右移要管符号位,右移一位变成10100110. 逻辑左移=算数左移,右边统一添0 逻辑右移, ...

  8. 按钮与js事件先后顺序

    <!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8" ...

  9. Shell case in语句详解

    和其它编程语言类似,Shell 也支持两种分支结构(选择结构),分别是 if else 语句和 case in 语句.在<Shell if else>一节中我们讲解了 if else 语句 ...

  10. 32. Random类

    1.Random class Random implements java.io.Serializable 下面是一个简单验证码的代码: public static void main(String[ ...