mysql 性能分析套件
#!/usr/local/python3./bin/python3.
#!coding:utf-
####################################
#目地:用于诊断mysql性能问题
#作者:蒋乐兴
#时间:--
#create user moniter@'127.0.0.1' identified by 'moniter@2048';
#
#################################### import mysql.connector as connector
import argparse
import psutil
import json
import sys
import os show_global_status_56="select variable_name,variable_value from information_schema.global_status where variable_name= %s"
show_global_variables_56="select variable_name,variable_value from information_schema.global_variables where variable_name= %s"
show_global_status_57="select variable_name,variable_value from performance_schema.global_status where variable_name= %s"
show_global_variables_57="select variable_name,variable_value from performance_schema.global_variables where variable_name= %s" class AnalyseBase(object):
def __init__(self,cursor,args):
self.cursor=cursor
self.args=args
self.result={} def Analyse(self):
"执行分析函数"
pass
def Print(self):
print(json.dumps(analyst.result,sort_keys=True,indent=,ensure_ascii=False)) class AnalyseInnodb(AnalyseBase):
def innodb_log_waits(self):
"status:innodb_log_waits innodb 等待刷新redo log 的次,如果它不是0,说明innodb_log_buffer_size 过小"
self.cursor.execute(args.show_global_status,('innodb_log_waits',))
name,value=self.cursor.fetchone()
comment=None
if int(value)==:
comment='正常'
else:
comment='innodb_log_waits > 0 应该适当增加innodb_log_buffer_size的大小'
self.result['innodb_log_waits']={'name':'innodb_log_waits','value':value,'comment':comment} def innodb_flush_log_at_trx_commit(self):
("variables:innodb_flush_log_at_trx_commit 0:事务提交时并不把redo log 写入日志文件,而是等待主线程每秒的刷新。"
"1:commit 时同步的方式刷新redo log 到日志文件"
"2:commit 时异步的方式刷新redo log 到日志文件")
self.cursor.execute(args.show_global_variables,('innodb_flush_log_at_trx_commit',))
name,value=self.cursor.fetchone()
comment=None
if int(value)==:
comment='正常、由于每个事务完成后都要同步的刷新日志,所以性能不是最好'
else:
comment='注意、有安全隐患;0:事务提交时并不把redo log 写入日志文件,而是等待主线程每秒的刷新;2:commit 时异步的方式刷新redo log 到日志文件。'
self.result['innodb_flush_log_at_trx_commit']={'name':'innodb_flush_log_at_trx_commit','value':value,'comment':comment} def innodb_buffer_pool_size(self):
self.cursor.execute(args.show_global_variables,('innodb_buffer_pool_size',))
name,value=self.cursor.fetchone()
memory_object=psutil.virtual_memory();
total_memory=memory_object.total
rate=float(value)/float(total_memory)
comment=None
if rate <=0.75:
comment="注意、innodb_buffer_pool_size 过小;total_memory:{0}{1} / innodb_buffer_pool_size:{2}{3} = {4}%"
elif rate<=0.85:
comment="正常、innodb_buffer_pool_size 合适;total_memory:{0}{1} / innodb_buffer_pool_size:{2}{3} = {4}%"
else:
comment="注意、innodb_buffer_pool_size 过大;total_memory:{0}{1} / innodb_buffer_pool_size:{2}{3} = {4}%"
sign=args.memoryunit['sign']
unit=int(args.memoryunit['unit'])
value=int(value)
comment=comment.format(value/unit,sign,total_memory/unit,sign,rate*)
self.result['innodb_buffer_pool_size']={'name':'innodb_buffer_pool_size','value':"{0}{1}".format(value/unit,sign),'comment':comment} def innodb_file_per_table(self):
"variables:innodb_file_per_table 不做成单独表空间的话管理不方便"
self.cursor.execute(args.show_global_variables,('innodb_file_per_table',))
name,value=self.cursor.fetchone()
comment=None
if comment=='ON':
comment='正常'
else:
comment='注意、建议开启innodb_file_per_table,以方式管理innodb表空间文件'
self.result['innodb_file_per_table']={'name':'innodb_file_per_table','value':value,'comment':comment} def innodb_io_capacity(self):
"1:在合并插入缓冲时,合并插入缓冲数量为innodb_io_capacity的5%; 2:在从缓冲区刷新脏页时,刷新脏页的数量为innodb_io_capacity页。"
self.cursor.execute(args.show_global_variables,('innodb_io_capacity',))
name,value=self.cursor.fetchone()
comment=("注意、无法确认最优值,请核对磁盘IO能力。在合并插入缓冲时,合并插入缓冲数量为innodb_io_capacity的5%;"
"在从缓冲区刷新脏页时,刷新脏页的数量为innodb_io_capacity页。")
self.result['innodb_io_capacity']={'name':'innodb_io_capacity','value':value,'comment':comment} def innodb_max_dirty_pages_pct(self):
"innodb 在每秒刷新缓冲池时会去判断这个值,如果大于innodb_max_dirty_pages_pct,才会去刷新100个脏页"
self.cursor.execute(args.show_global_variables,('innodb_max_dirty_pages_pct',))
name,value=self.cursor.fetchone()
comment=None
if int(value) <=:
comment=("注意、innodb_max_dirty_pages_pct 过小;这会增加磁盘的IO负载,请适当增加,推荐值75~80")
elif int(value) <=:
comment='正常'
else:
comment='注意、innodb_max_dirty_pages_pct 过大;脏面数量过大,这会影响服务宕机后,重启的用时'
self.result['innodb_max_dirty_pages_pct']={'name':'innodb_max_dirty_pages_pct','value':value,'comment':comment} def Analyse(self):
self.innodb_log_waits()
self.innodb_file_per_table()
self.innodb_flush_log_at_trx_commit()
self.innodb_io_capacity()
self.innodb_max_dirty_pages_pct()
self.innodb_buffer_pool_size() if __name__=="__main__":
parser=argparse.ArgumentParser()
parser.add_argument('--host',default='127.0.0.1',help='ip address of mysql server.....')
parser.add_argument('--port',default=,type=int,help='port number of mysql server....')
parser.add_argument('--user',default='moniter',help='mysql user name................')
parser.add_argument('--password',default='moniter@2048',help='password of mysql user.........')
parser.add_argument('--mysqlversion',default=5.6,choices=['5.6','5.7'],help='version of mysql server........')
parser.add_argument('--memoryunit',default='MB',choices=['G','GB','M','MB','K','KB'])
parser.add_argument('target',default='innodb',choices=['innodb','binlog','all'],help='the part of mysql that you want to tuning')
args=parser.parse_args()
#隔离不同版本mysql数据库的差异
if args.mysqlversion==5.6:
args.show_global_status=show_global_status_56
args.show_global_variables=show_global_variables_56
elif args.mysqlversion==5.7:
args.show_global_status=show_global_status_57
args.show_global_variables=show_global_variables_57
#调整内存单位
unit=*
if args.memoryunit in('G','GB'):
unit=**
elif args.memoryunit in ('M','MB'):
unit=*
elif args.memoryunit in ('K','KB'):
unit=
args.memoryunit={'sign':args.memoryunit,'unit':unit}
cnx=None
cursor=None
connection_config={
'host':args.host,
'port':args.port,
'user':args.user,
'password':args.password
}
try:
cnx=connector.connect(**connection_config)
cursor=cnx.cursor()
analyst=AnalyseInnodb(cursor,args)
analyst.Analyse()
analyst.Print()
except Exception as err:
print(err)
finally:
if cnx != None:
cnx.close()
cursor.close()
mysql 性能分析套件的更多相关文章
- MySQL性能分析及explain的使用
MySQL性能分析及explain用法的知识 1.使用explain语句去查看分析结果 如explain select * from test1 where id=1;会出现:id selectty ...
- MySQL性能分析及explain的使用说明
1.使用explain语句去查看分析结果 如explain select * from test1 where id=1;会出现:id selecttype table type possible_k ...
- mysql性能分析show profile/show profiles
MySQL性能分析show profiles show profile 和 show profiles 语句可以展示当前会话(退出session后,profiling重置为0) 中执行语句的资源使用情 ...
- MySQL性能分析和优化-part 1
MySQL性能优化 平时我们在使用MySQL的时候,怎么评估系统的运行状态,怎么快速定位系统瓶颈,又如何快速解决问题呢? 本文总结了多年来MySQL优化的经验,系统介绍MySQL优化的方法. OS性能 ...
- MySQL性能分析, mysql explain执行计划详解
MySQL性能分析 MySQL性能分析及explain用法的知识是本文我们主要要介绍的内容,接下来就让我们通过一些实际的例子来介绍这一过程,希望能够对您有所帮助. 1.使用explain语句去查看分析 ...
- mysql性能分析工具
一.EXPALIN 在SQL语句之前加上EXPLAIN关键字就可以获取这条SQL语句执行的计划 那么返回的这些字段是什么呢? 我们先关心一下比较重要的几个字段: 1. select_type 查询类型 ...
- MySQL性能分析(转)
第一步:检查系统的状态 通过操作系统的一些工具检查系统的状态,比如CPU.内存.交换.磁盘的利用率.IO.网络,根据经验或与系统正常时的状态相比对,有时系统表面上看起来看空闲,这也可能不是一个正常的状 ...
- mysql性能分析-------profiling和explain
1. profiling之性能分析 MySQL5.0.37版本以上支持了Profiling – 官方手册.此工具可用来查询 SQL 会执行多少时间,System lock和Table lock 花多少 ...
- MySQL性能分析、及调优工具使用详解
本文汇总了MySQL DBA日常工作中用到的些工具,方便初学者,也便于自己查阅. 先介绍下基础设施(CPU.IO.网络等)检查的工具: vmstat.sar(sysstat工具包).mpstat.op ...
随机推荐
- Virtual Box 工具栏(菜单栏)消失的解决方法
异常处理汇总-开发工具 http://www.cnblogs.com/dunitian/p/4522988.html 现在Virtual Box非常牛逼(不排除Oracle又准备像Java SE那样 ...
- 配置wamp环境使得在命令行下也能执行socket扩展
首先在apache中开启socket扩展 php环境安装目录\bin\apache\apache2.2.17\bin\php.ini 去掉前面的';' extension=php_sockets. ...
- git:fatal the current branch master has no upstream branch
git push的时候发生上述错误. git push -u "resp" master resp为git仓库的“地址” reference中由解决方案 http://blog.c ...
- 画图工具Graphviz安装配置
Graphviz (英文:Graph Visualization Software的缩写)是一个由AT&T实验室启动的开源工具包,用于绘制DOT语言脚本描述的图形.它也提供了供其它软件使用的库 ...
- union all合并记录
SQL> SELECT empno AS 编码, ename AS 名称, nvl(mgr, deptno) AS 上级编码 FROM emp 2 order by empno 3 UNION ...
- Java异常的使用
1.exception的分类 java将异常分为两种,checked exception和unchecked exception(一般指runtimeException). checked excep ...
- [置顶] Objective-C ,ios,iphone开发基础:自定义控件:Eg: UIButton
第一步:新建一个工程,在 .h文件中坐如下声明: #import <UIKit/UIKit.h> @interface MyButtonViewController : UIViewCon ...
- 二叉排序树的创建删除中序输出&&平衡树
#include<iostream> #include<cstdio> #include<cstring> #include<cmath> #inclu ...
- androidHandler讲解
秒钟还没有完成的话,会收到Android系统的一个错误提示 "强制关闭". 这个时候我们需要把这些耗时的操作,放在一个子线程中,因为子线程涉及到UI更新,Android主线程是 ...
- leetcode先刷_Unique Paths II
那么上述问题,假设这个矩阵堵塞障碍,不能在若干组合前面所用的方法,因为这么多的位置实际上是没有办法的事儿. 还有剩下的唯一合理的解决方案dp该.与最低要求,并且等,从右下角以前突起,对于位置(i, j ...