xphrof性能分析线上部署实践
说明
将xhprof部署在线上环境,在特定情况下进行性能分析,方便快捷的排查线上性能问题。
通过参数指定及添加代码行触发进入性能分析,并将结果保存入MongoDB。
因为xhprof对性能的影响,只部署在一台机子上。
环境配置
PHP 5.5.25
xhprof-0.9.4
xhprof:git@github.com:phacility/xhprof.git
核心入口文件
/PATH/xhprof/config/inject.php
<?php
//根据条件是否进入性能分析
if( !function_exists('xphrof_checkEnable') ){
//返回值,ture-进入, false-不进入
function xphrof_checkEnable($cmdName=''){
//如果是脚本,直接进
if( !empty($cmdName) ){
return true;
}
//方法一:根据参数进
$enable = !empty($_GET['showyourbug']) || !empty($_POST['showyourbug']);
//方法二:根据百分比或随机
//$enable = rand(0, 100) === 42;
//方法三:使用唯一性数据(ip\host\op_user)
return $enable;
}
}
//获取标识请求的唯一性数据
if( !function_exists('xphrof_getUniqSign') ){
function xphrof_getUniqSign($cmdName=''){
//请求的标识-ip
$clientIp = isset($_SERVER['REMOTE_ADDR']) ? $_SERVER['REMOTE_ADDR'] : php_uname('n');
//请求的标识-路由
$path = 'unknow';
if( isset($_SERVER["REQUEST_URI"]) ){
$purl = parse_url($_SERVER["REQUEST_URI"], PHP_URL_PATH);
$path = 'http-' . (!empty($purl) ? str_replace('/','-', trim($purl, ' /')) : 'unknow');
}else{
$path = 'cmd-' . ( !empty($cmdName) ? str_replace('\\','-', trim($cmdName, ' \\')): 'unknow');
}
//尝试从cookie中取用户名
//执行分析的服务器
$hostName = php_uname('n');
return [
'ip' => $clientIp,
'path' => $path,
'hostname' => $hostName
];
}
}
//主处理过程
if( !function_exists('xphrof_mainProcess') ){
function xphrof_mainProcess($cmdName=''){
if ( extension_loaded('xhprof') ) {
//xhprof功能统一开关,紧急情况下使用
$xhprofMainSwitch = true; //true-开, false-关
//判断是否进入分析
$enable = xphrof_checkEnable($cmdName);
if ( $xhprofMainSwitch && $enable ) {
$pathData = xphrof_getUniqSign($cmdName);
//开始性能分析
// XHPROF_FLAGS_NO_BUILTINS - 使得跳过所有内置(内部)函数
// XHPROF_FLAGS_CPU - 使输出的性能数据中添加 CPU 数据
// XHPROF_FLAGS_MEMORY - 使输出的性能数据中添加内存数据
xhprof_enable( XHPROF_FLAGS_MEMORY | XHPROF_FLAGS_CPU );
//注册,脚本执行完或exit后执行
register_shutdown_function(function() use ($pathData){
//xhprof的数据
$xhprofData = xhprof_disable();
//相应给客户端并结束请求
$returnClient = -1;
if (function_exists('fastcgi_finish_request')) {
$returnClient = fastcgi_finish_request();
}
//当前环境数据及post、get数据
$envData = [
'env' => $_SERVER,
'get' => $_GET,
'post' => $_POST,
'return_client' => intval($returnClient)
];
$XHPROF_ROOT = realpath(dirname(__FILE__) .'/..');
include_once $XHPROF_ROOT . "/xhprof_lib/utils/xhprof_lib.php";
include_once $XHPROF_ROOT . "/xhprof_lib/utils/xhprof_runs_mongo.php";
include_once $XHPROF_ROOT . "/xhprof_lib/service/MongoBaseSvc.php";
//加载配置文件
$xhprofConfig = include_once $XHPROF_ROOT . '/config/config.php';
$xhprofRuns = new XHProfRuns_Mongo($xhprofConfig);
$xhprofRuns->save_run($xhprofData, $envData, $pathData);
});
}
}
}
}
//默认启动一次-http,指定服务器才可执行
if( function_exists('php_uname') && in_array(php_uname('n'), [
'10.10.10.10', //测试开发服务器
'11.11.11.11' //线上执行服务器
], true) ){
xphrof_mainProcess();
}
//comand进入分析
if( !function_exists('xphrof_startProcess') ){
function xphrof_startProcess($cmdName=''){
xphrof_mainProcess($cmdName);
}
}
加载入口文件方案
1. 在项目启动的配置文件中加载
//例如:bootstrap/autoload.php
/*
|--------------------------------------------------------------------------
| add xhprof config
|--------------------------------------------------------------------------
|
| inject xhprof config.
|
*/
$xhprofFile = __DIR__.'/../xhprof/config/inject.php';
if (file_exists($xhprofFile)) {
require_once $xhprofFile;
}
2. 在项目nginx的配置中加载
//在 nginx 的fastcgi配置处
set $xhprofconf "auto_prepend_file=/PATH/xhprof/config/inject.php";
fastcgi_param PHP_VALUE $xhprofconf;
触发进入
- 对HTTP请求访问时增加参数:showyourbug=1
- 对CLI脚本代码中增加:xphrof_startProcess(__CLASS__);
MongoDB保存结构
解析保存xhprof_disable()返回的数据、请求的环境变量及数据。可设置过期索引保存指定时长日志。
{
"ip" : "10.10.10.10", //访问客户端ip
"path" : "http-", //资源标识,http-接口请求,cmd-artisan脚本执行
"hostname" : "machine_host_name", //执行机器名称
"run_id" : "5afe795c96a83", //唯一run_id
"main" : { //整体数据
"ct" : NumberLong(1),
"wt" : NumberLong(36),
"cpu" : NumberLong(0),
"mu" : NumberLong(1856),
"pmu" : NumberLong(672)
},
"xhprof_raw_data" : "a:2:{s:23:\"main()==>xhprof_disable\";a:5:{s:2:\"ct\";i:1;s:2:\"wt\";i:8;s:3:\"cpu\";i:0;s:2:\"mu\";i:840;s:3:\"pmu\";i:96;}s:6:\"main()\";a:5:{s:2:\"ct\";i:1;s:2:\"wt\";i:36;s:3:\"cpu\";i:0;s:2:\"mu\";i:1856;s:3:\"pmu\";i:672;}}", //原始数据体
"env_data" : { //相关环境日志
"env" : { //$_SERVER信息
"USER" : "nobody",
"HOME" : "/",
"FCGI_ROLE" : "RESPONDER",
"SCRIPT_FILENAME" : "/PATH/public/index.php",
......
"REQUEST_TIME" : NumberLong(1526626652)
},
"get" : { //$_GET信息
"showyourbug" : "1"
},
"post" : [], //$_POST信息
"return_client" : NumberLong(-1) //fastcgi_finish_request相应客户端结果
},
"index_time" : ISODate("2018-05-18T06:57:32.000Z"), //过期索引,保留2天
"create_time" : "2018-05-18 14:57:32" //创建时间
}
对线上性能的影响分析
测试接口
public function getHello(){
$ret = [
'errno' => 0,
'errmsg' => 'success'
];
return json_encode($ret);
}
使用ab请求
ab -n 1000 -c 100 -X 10.10.10.10:80 http://hostname/hello
ab -n 1000 -c 100 -X 10.10.10.10:80 http://hostname/hello?showyourbug=1
测试结果
批量请求对服务器影响:
| 测试类别 | Requests per second (#/sec) | 平均 | Time per request (ms) | 平均 |
| 仅测试接口 | 49.23,50.02,49.41 | 49.55 | 20.312,19.992,20.239 | 20.181 |
| 加载配置(未进入) | 46.74,45.48,45.21 | 45.81 (-8.76%) | 21.397,21.987,22.118 | 21.834 (-8.19%) |
| 加载配置(进入) | 10.72,10.48,11.46 | 10.88 (-78%) | 93.281,95.452,87.259 | 91.99 (-355.82%) |
对单个请求影响:
| 测试类别 | Time per request (ms) | 平均 |
| 仅测试接口 | 66.972,87.029,72.605 | 75.54 |
| 加载配置(未进入) | 79.183,80.728,83.101 | 81.004 (-7.23%) |
| 加载配置(进入) | 275.186,287.293,291.312 | 284.597 (-271.45%) |
结论
xhprof会影响线上性能,所以只部署到一台线上机进行监控。
原文地址:https://segmentfault.com/a/1190000015591262
xphrof性能分析线上部署实践的更多相关文章
- ASP.NET Core在CentOS上的最小化部署实践
引言 本文从Linux小白的视角, 在CentOS 7.x服务器上搭建一个Nginx-Powered AspNet Core Web准生产应用. 在开始之前,我们还是重温一下部署原理,正 ...
- 在阿里云ECS CentOS7上部署基于MongoDB+Node.js的博客
前言:这是一篇教你如何在阿里云的ECS CentOS 7服务器上搭建一个个人博客的教程,教程比较基础,笔者尽可能比较详细的把每一步都罗列下来,包括所需软件的下载安装和域名的绑定,笔者在此之前对Linu ...
- VNF网络性能提升解决方案及实践
VNF网络性能提升解决方案及实践 2016年7月 作者: 王智民 贡献者: 创建时间: 2016-7-20 稳定程度: 初稿 修改历史 版本 日期 修订人 说明 1.0 20 ...
- 腾讯云-ASP.NET Core+Mysql+Jexus+CDN上云实践
腾讯云-ASP.NET Core+Mysql+Jexus+CDN上云实践.md 开通腾讯云服务器和Mysql 知识点: ASP.NET Core和 Entity Framework Core的使用 L ...
- zz开源 MNN:淘宝在移动 AI 上的实践
开源 MNN:淘宝在移动 AI 上的实践 陈以鎏(离青) 阅读数:40612019 年 6 月 28 日 随着深度学习的快速发展和端侧设备算力的不断提升,原本在云端执行的推理预测工作正在部分迁 ...
- 滴滴推理引擎IFX:千万规模设备下AI部署实践
桔妹导读:「滴滴技术」将于本月开始,联合各技术团队为大家带来精彩分享.你想了解的技术干货,深度专访,团队及招聘将于每周三与你准时见面.本月为「滴滴云平台事业群分享月」,在今天的内容中,云平台事业群-机 ...
- 在 CentOS7 上部署 zookeeper 服务
在 CentOS7 上部署 zookeeper 服务 1 用 SecureCRT 或 XShell 等 Linux 客户端工具连接至 CentOS7 服务器: 2 进入到 /usr/local/too ...
- [转]基于AWS的自动化部署实践
作者 徐桂林 发布于 2014年1月22日 -------------------------------------------------------------------- 1. 背景 在过去 ...
- 虚拟机评估——如何确定一个CPU核上部署的虚拟机数量?
最近研究虚拟化技术,不可避免遇到一个问题:如何评估物理主机上虚拟主机的容量?下面这篇文章的思路有一定的启发性,转发一下. 如何确定一个CPU核上部署的虚拟机数量? 摘要:本文说明一个CPU核上部署虚拟 ...
随机推荐
- mysql查询流程
首先是连接器 连接器负责跟客户端来链接 链接成功后 mysql会先去查询缓存,之前是不是有查询的这条语句,之前执行过的话 就会以key-value的形式缓存到内存中,如果没有就会继续执行后面的,执行完 ...
- 使用Quartz实现定时作业
该文章是系列文章 基于.NetCore和ABP框架如何让Windows服务执行Quartz定时作业 的其中一篇. Quartz是一个开源的作业调度框架,准确的称谓应该是 Quartz.Net,它是Ja ...
- 浅谈Windows API编程
WinSDK是编程中的传统难点,个人写的WinAPI程序也不少了,其实之所以难就难在每个调用的API都包含着Windows这个操作系统的潜规则或者是windows内部的运行机制…… WinSDK是编程 ...
- 198 House Robber 打家劫舍
你是一个专业的强盗,计划抢劫沿街的房屋.每间房都藏有一定的现金,阻止你抢劫他们的唯一的制约因素就是相邻的房屋有保安系统连接,如果两间相邻的房屋在同一晚上被闯入,它会自动联系警方.给定一个代表每个房屋的 ...
- hdu3436Queue-jumpers(线段树)
链接 这题最不好求的一部分是rank部分 因为top每次都是把一个数放在队头 不会穿插在数组里 也就是说后面没有top过的一部分数 依旧保持有序 这样可以分为两部分来处理 比如 1 2 3 4 5 6 ...
- Sping Boot返回Json格式自定义
转载请注明http://www.cnblogs.com/majianming/p/8491020.html 在写项目过程中,遇到了需要定义返回的json字段格式的问题 例如在实体属性中,我有一个字段是 ...
- Oracle对表空间无权限
有的时候我们在Oracle数据库中对执行insert.update之类的语句时会出错,Oracle说我们对表空间无权限.执行下面的语句就可以修改用户对表空间的权限了. 执行语句: alter user ...
- js promise 介绍和使用
1.什么是promise js是单线程执行的. ajax是典型的异步操作,我们通常会在ajax的成功或者失败之后写上回掉函数.这中写法是一种嵌套的方式,如果回掉多了会造成代码复杂并且难以复用. pro ...
- vscode增加sftp扩展
下载 sftp-sync 扩展插件 填写配置 快捷键 ctrl+shift+P 打开指令窗口,输入sftp:config,回车,就会在当前工作工程的.vscode文件夹下生成一个sftp.json文件 ...
- 阿里云设置指定ip访问实例
添加安全组规则 添加允许访问的外网IP,优先级设置为1,并将所有ip设置为拒绝访问,优先级设置为2. 参考地址: https://help.aliyun.com/document_detail/254 ...