perf使用的问题,再看perf record,perf record 设置的采样频率,采样频率是如何体现在
当perf stat -e branches 是统计
再看perf record,perf record是为了是记录时间发生的时候的调用栈,
在我的测试代码中总共有200,000,000条branch的命令,但是为啥我只看到了1964这样一个数量级的采样呢?
perf record设置了采样的频率吗?
发现了和sample_freq相关,这个sample_freq是干啥的?
表示我一秒钟采样多少次,但是这里有个问题,原来系统默认的采样频率是4000,那么这里就涉及到了所有管控涉及到的采样频率的问题了。如果这个进程在采样周期内都只发生了三次的branch事件,
采样频率是4000是什么意思?是时间计数器溢出吗?采样的频率是怎么定的?一条指令每秒中连4000条指令都不到这个就说不过去了,
应该cycles:pp是什么意思?
那么问题就来了,对于 cycles来说还能做采样,对于branches事件来说,要怎么做采样呢?因为CPU的时钟周期是固定的,但是branchs这些事件却不是固定的,所以对于函数来说,cycles在一个时钟周期内是均匀的,只要做一个溢出就可以采集到事件,那么在perf record的指令来说,perf record -e branches又有什么实际的物理意义呢?
-e中指定的事件: -e branches,确实会导致文件系统中记录下这个值的,使用perf report的时候会告诉你这个事件发生了多少次,但是
采样的频率是比较难以理解的,看下相关的源码,在perf系统调用中国sample_period中记录的是
sample_freq中是啥子呢
采样的事件放在哪里?
98 enum perf_hw_id {
99 /*
100 * Common hardware events, generalized by the kernel:
101 */
102 PERF_COUNT_HW_CPU_CYCLES = 0,
103 PERF_COUNT_HW_INSTRUCTIONS = 1,
104 PERF_COUNT_HW_CACHE_REFERENCES = 2,
105 PERF_COUNT_HW_CACHE_MISSES = 3,
106 PERF_COUNT_HW_BRANCH_INSTRUCTIONS = 4,
107 PERF_COUNT_HW_BRANCH_MISSES = 5,
108 PERF_COUNT_HW_BUS_CYCLES = 6,
109 };
到了真正的函数x86_pmu_hw_config,我们发现竟然在这里还有 event->hw.config = ARCH_PERFMON_EVENTSEL_INT;
直接就是
20 #define ARCH_PERFMON_EVENTSEL_EVENT 0x000000FFULL
21 #define ARCH_PERFMON_EVENTSEL_UMASK 0x0000FF00ULL
22 #define ARCH_PERFMON_EVENTSEL_USR (1ULL << 16)
23 #define ARCH_PERFMON_EVENTSEL_OS (1ULL << 17)
24 #define ARCH_PERFMON_EVENTSEL_EDGE (1ULL << 18)
25 #define ARCH_PERFMON_EVENTSEL_PIN_CONTROL (1ULL << 19)
26 #define ARCH_PERFMON_EVENTSEL_INT (1ULL << 20)
27 #define ARCH_PERFMON_EVENTSEL_ANY (1ULL << 21)
28 #define ARCH_PERFMON_EVENTSEL_ENABLE (1ULL << 22)
29 #define ARCH_PERFMON_EVENTSEL_INV (1ULL << 23)
30 #define ARCH_PERFMON_EVENTSEL_CMASK 0xFF000000ULL
31
硬件事件和相应的寄存器id之间的映射关系
25 * Intel PerfMon, used on Core and later.
26 */
27 static u64 intel_perfmon_event_map[PERF_COUNT_HW_MAX] __read_mostly =
28 {
29 [PERF_COUNT_HW_CPU_CYCLES] = 0x003c,
30 [PERF_COUNT_HW_INSTRUCTIONS] = 0x00c0,
31 [PERF_COUNT_HW_CACHE_REFERENCES] = 0x4f2e,
32 [PERF_COUNT_HW_CACHE_MISSES] = 0x412e,
33 [PERF_COUNT_HW_BRANCH_INSTRUCTIONS] = 0x00c4,
34 [PERF_COUNT_HW_BRANCH_MISSES] = 0x00c5,
35 [PERF_COUNT_HW_BUS_CYCLES] = 0x013c,
36 [PERF_COUNT_HW_REF_CPU_CYCLES] = 0x0300, /* pseudo-encoding */
37 };
最终最关键的是都合入到了hw.config中去了,
采样了五千次,这五千次都是从哪里来的?
0xffffffff811834a0 : perf_prepare_sample+0x0/0x350 [kernel]
0xffffffff8118381f : perf_event_output+0x2f/0x80 [kernel]
0xffffffff81183a1f : __perf_event_overflow+0x1af/0x1d0 [kernel]
0xffffffff811844d4 : perf_event_overflow+0x14/0x20 [kernel]
0xffffffff8100c4b1 : intel_pmu_handle_irq+0x1e1/0x460 [kernel]
0xffffffff810056bd : perf_event_nmi_handler+0x2d/0x50 [kernel]
0xffffffff810323a9 : nmi_handle+0x69/0x120 [kernel]
0xffffffff810328e0 : default_do_nmi+0x40/0x100 [kernel]
0xffffffff81032a82 : do_nmi+0xe2/0x130 [kernel]
0xffffffff81826906 : nmi+0x56/0xa5 [kernel]
-
所以branch事件看来仅仅是是为了作统计用的,真正负责采样的或许仍然是cycles事件, intel_pmu_handle_irq事件;
所以他妈的采样的频率和采样的事件无关,有了-e感觉perf_event_
output会增多,有采样的事件,有收集的事件,待会验证一下
看下采样的频率是如何收集到设置器里的
PMU计数器如何设置溢出,到底这个频率是怎么设置的呀,
抓到了一个关键的函数:x86_perf_event_set_period
关键函数:x86_perf_event_set_period,这个函数中会涉及到参数perf_event->hw_perf_event->sample_period,在这个结构体会出现下个函数的值。
perf_event_overflow是啥东西
perf_calculate_period 函数应该是最终的算周期的函数了,所有
在perf_adjust_period中会调整hwc->sample_period的数值
发现换成不同的事件,event->hwc->sample_period竟然不是一样的!
sample_period中存储是多少条指令发生一次溢出事件!
这里采样的算法是多么的精妙啊!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
发现啥东西了吗?这里的采样就像是tcp的包发送一样,逐渐地试探,这里所说的-F 1000,都是指我这个进程的执行周期,说白了就是perf_clock,最关键的函数就是perf_adjust_period,看一下这些函数都是怎么收敛的:
-C是指进程的执行周期内的采样,先看下采样的算法,
如果这个进程还有线程呢,这个待会测试一下,有几个问题需要解决,首先这些采样的周期如何在不同的core上分配
在我这个进程执行的1s之内我要做1000次采样,首先我将计数器设置为1,然后发现在10us的时候这个值溢出了,说明我在branches上设置了1,这个值就溢出了,溢出说明了这个计数器的值,我设置的采样的周期是1000, perf_adjust_period函数中perf是通过perf_calculate_period函数来来计算下一个溢出值是多少,溢出总会有一个时间,我们发现对于
是什么意思?perf_adjust_period函数中中:
if (event->attr.freq) {
u64 now = perf_clock(); // ns granularity
s64 delta = now - hwc->freq_time_stamp; hwc->freq_time_stamp = now; if (delta > 0 && delta < 2*TICK_NSEC)
perf_adjust_period(event, delta, hwc->last_period, true);
}
上面说明了啥,上面的函数中 delta是时间片溢出的绝对的时间,这里是
刚开始启动的时候都是不均匀的,刚开始的sample_period
什么时候会adjust_period,只有在中断溢出的时候!!!!
adjust的地方只会修改sample,但是真正设置这个溢出值的地方是x86_perf_event_set_period,所以这里的溢出的事件啊,怎么样调整的周期
其中perf_clock调用的是sched_clock,也就是说,这里只计算我这个调度实体的调度时间!!!!!!!!!!!
整个perf里大量运用到了估计值,我到底应该在什么时候发生溢出?如果是cycles这种还好说,但是如果是branches这样的呢?根本就没有办法估计,所以我只能根据历史信息去估计;啥子历史信息呢?
我的采样周期是10^9/freq,在上一个溢出周期中,我的溢出值设置的多少,然后溢出的时间是多少,那么一个很简单的比例的关系就出来了
A=10^9/freq A/period = lastduration/lastperiod,这样我们想要求的period就是我们想要的下次的溢出值了嘛。这样就能达到一个大约的统计值了;
892316 x86_perf_event_set_period 4 sample_period(1 0x1)
10626 x86_perf_event_set_period 5 sample_period(1 0x1)
115968 x86_perf_event_set_period 6 sample_period(1 0x1)
4052 x86_perf_event_set_period 7 sample_period(1 0x1)
37069 x86_perf_event_set_period 8 sample_period(2 0x2)
3104 x86_perf_event_set_period 9 sample_period(2 0x2)
29846 x86_perf_event_set_period 10 sample_period(8 0x8)
3093 x86_perf_event_set_period 11 sample_period(8 0x8)
29394 x86_perf_event_set_period 12 sample_period(38 0x26)
3270 x86_perf_event_set_period 13 sample_period(38 0x26)
3788 x86_perf_event_set_period 14 sample_period(179 0xb3)
3821 x86_perf_event_set_period 15 sample_period(5996 0x176c)
36838 x86_perf_event_set_period 16 sample_period(194467 0x2f7a3)
22025 x86_perf_event_set_period 17 sample_period(194467 0x2f7a3)
34085 x86_perf_event_set_period 18 sample_period(583293 0x8e67d)
248057 x86_perf_event_set_period 19 sample_period(583293 0x8e67d)
20792 x86_perf_event_set_period 20 sample_period(583293 0x8e67d)
20943 x86_perf_event_set_period 21 sample_period(1 0x1)
4852 x86_perf_event_set_period 22 sample_period(1 0x1)
736460 x86_perf_event_set_period 23 sample_period(11600 0x2d50)
27806 x86_perf_event_set_period 24 sample_period(11600 0x2d50)
25194 x86_perf_event_set_period 25 sample_period(12048 0x2f10)
25422 x86_perf_event_set_period 26 sample_period(70082 0x111c2)
165045 x86_perf_event_set_period 27 sample_period(407591 0x63827)
800145 x86_perf_event_set_period 28 sample_period(665214 0xa267e)
1569057 x86_perf_event_set_period 29 sample_period(685995 0xa77ab)
1327410 x86_perf_event_set_period 30 sample_period(654895 0x9fe2f)
45090 x86_perf_event_set_period 31 sample_period(614171 0x95f1b)
24029926 x86_perf_event_set_period 32 sample_period(614171 0x95f1b)
1411250 x86_perf_event_set_period 33 sample_period(614171 0x95f1b)
1387908 x86_perf_event_set_period 34 sample_period(614171 0x95f1b)
1187035 x86_perf_event_set_period 35 sample_period(572970 0x8be2a)
15984867 x86_perf_event_set_period 36 sample_period(572970 0x8be2a)
265346 x86_perf_event_set_period 37 sample_period(572970 0x8be2a)
1365152 x86_perf_event_set_period 38 sample_period(572970 0x8be2a)
1392381 x86_perf_event_set_period 39 sample_period(553815 0x87357)
perf使用的问题,再看perf record,perf record 设置的采样频率,采样频率是如何体现在的更多相关文章
- 再看Ajax
再回顾Ajax相关的内容,再次梳理学习还是很有必要的,尤其是实际的开发中,ajax更是必不可少,仔细学习以便避免不必要的错误. 文章导读: --1.使用XMLHttpRequest---------- ...
- 再看ftp上传文件
前言 去年在项目中用到ftp上传文件,用FtpWebRequest和FtpWebResponse封装一个帮助类,这个在网上能找到很多,前台使用Uploadify控件,然后在服务器上搭建Ftp服务器,在 ...
- 再看 AspriseOCR - OCR应用开发 -20151124
再看 AspriseOCR - OCR应用开发 我写这个博文时间为 2015/11/24日,注意时间因为,网上很多文章时间上很久远,有的已经不能参考了 很多人面对从图片中识别文字或者数字0~9 A~ ...
- Android菜鸟的成长笔记(17)—— 再看Android中的Unbounded Service
原文:Android菜鸟的成长笔记(17)-- 再看Android中的Unbounded Service 前面已经写过关于startService(Unbounded Service)的一篇文章:&l ...
- 再看case语句
再看case语句,case语句只处理单条记录,而不是set 列名的使用,可以当做数值来使用: case when 后面简直是完美的的,什么东西都是能放的,只要是一个逻辑上的true/false的逻辑就 ...
- android 智能指针的学习先看邓凡平的书扫盲 再看前面两片博客提升
android 智能指针的学习先看邓凡平的书扫盲 再看前面两片博客提升
- python基础----再看property、描述符(__get__,__set__,__delete__)
一.再看property 一个静态属性property ...
- 再看Scrapy(1) 基本概念
再看Scrapy(1) 基本概念 1 准备 安装scrapy: 国内镜像源(官方的pypi不稳定)安装 pip3 install -i https://pypi.douban.com/simple/ ...
- 再看GS接包过程
再看GS接包过程 bool GameServer::ProcessLoop(packet& rPkt) { if(false == m_spDataLayer->Recv(rPkt)) ...
随机推荐
- linux进程篇 (三) 进程间的通信3 IPC通信
3 IPC通信 用户空间 进程A <----无法通信----> 进程B -----------------|--------------------------------------|- ...
- C# WebBrowser的DrawToBitmap方法 截取网页保存为图片
bool mark = true; private void btnOpen_Click(object sender, EventArgs e) { ...
- JavaScript---通过正则表达式验证表单输入
验证输入的name只能是数字或字母或下划线 js <script type="text/javascript"> function submitOn(){ var f ...
- 【POJ2482】Stars in Your Window
[POJ2482]Stars in Your Window 题面 vjudge 题解 第一眼还真没发现这题居然™是个扫描线 令点的坐标为\((x,y)\)权值为\(c\),则 若这个点能对结果有\(c ...
- DSP5509的XF实验-第一篇
1. 使用大道科技的EASY-DSP5509开发板,测试第一个例程,DSP_easy5509\Code-Easy5509\EX01_XF\XF 2. 直接编译,报出错误,在Problems窗口错误指示 ...
- OSG-漫游
本文转至http://www.cnblogs.com/shapherd/archive/2010/08/10/osg.html 作者写的比较好,再次收藏,希望更多的人可以看到这个文章 互联网是是一个相 ...
- Jmeter做压力测试的心得
什么是性能压测? 也是最近刚刚接触到,就是被测试的系统,在一定的访问压力下,看程序运行是否稳定/服务器运行是否稳定,通常情况,是模拟多个请求同时 请求服务器,也就是在某个时间内,比如说1秒内,调用接口 ...
- Unity编辑器 - TreeView控件笔记
用起来有一些规则,写个简单的案例以备查阅: using System.Collections.Generic; using UnityEditor.IMGUI.Controls; using Unit ...
- Java学习 · 初识 多线程
多线程 1. 基础概念 a) 程序 Program i. 静态代码,指令集,应用程序执行的蓝本 b) 进程 Process i. 动态概念,正在运 ...
- pymsql报错:UnicodeEncodeError: 'latin-1' codec can't encode characters End,OK!!
UnicodeEncodeError: 'latin-1' codec can't encode characters的做法基本一致,后来发现是因为使用的是mysqldb,照着网上的方法修改配置应该可 ...