linux动态追踪神器——Strace实例介绍【转】

Strace是Linux下一款通用的进程动态跟踪工具，用来追踪程序执行时的系统调用和所接收的信号。其应用方法如下图（部分）。

首先，简单说说它的使用参数，Strace的参数包括输出参数、过滤参数、统计参数、跟踪参数、启动参数和其他杂项。详细的看帮助文档或者搜索它的用法，我们只简单介绍几个常用的参数：

-p Pid 跟踪指定的进程号的进程。

-o 文件 输出追踪信息到文件。

-f 跟踪由fork调用所产生的子进程。

-e expr 表达式,用指定追踪的方法，常见有：

-e trace=open,close,rean,write 跟踪这四个系统函数的调用，默认的为set=all。

-e trace=file 跟踪有关文件操作的系统调用。

-e trace=process 跟踪进程调用。

-e trace=network 跟踪网络调用。

-e strace=signal 跟踪所系统信号调用。

-e trace=ipc 跟踪ipc通讯调用。

其他更多筛选公式略。。。

-d 输出debug信息到标准错误输出。

-c 统计功能，统计系统调用次数，时间和出错次数等信息。

-t/r 输出调用的绝对/相对时间戳。

-u 用户名 追踪特定用户的进程。

1、查找实际加载的配置文件

常有人会问我，为什么我的配置改了，实际沒生效。我问他你改完重启了么，哦，忘了。过了一会又来问，哥我重启了，还是一样没效果。我问你改的那个文件？他说，找网上百度的，不知道为啥不生效。

这个场景估计很多人都遇到过，那对付这类问题有没有啥好的、一劳永逸的办法，还是只凭经验或者频繁的问人老司机呢？

其实最好的一个方法，就是用strace追踪下进程加载的文件，这里面的加载的配置文件肯定就是真正使用的配置文件，修改这个文件，重启就肯定生效了。

举例，我们要找mysql的配置文件

strace -tf mysql 2>&1|grep cnf

结果如上图，我们看出来了，实际的调用文件是/etc/my.cnf。

至于命令中的“2>&1” ，有认真的同学会有疑问，去掉可以么？然后去试了，结果grep没起作用，所有内容一股脑全出来了。为什么如此呢？原来starce输出结果是输出到标准错误2的，当做debug信息了。而|管道传递给grep的只是标准输出1 ，所以内容全部显示了（标准错误），而grep 筛选没起作用（标准输出为空）。所以必须要加上“2>&1”，要把标准错误的信息先重定向到标准输出1。这样结果才对。

同样的方法，适用于查找配置文件，加载类库文件找不到等等。举一反三尝试好了。

2、追踪耗时进程

如果你突然发现你的程序启动很慢，或者占用cpu，内存等特别大；或者你发现系统负载很大，你通过top，ps等发现是某个进程导致，比如msyql程序；再者可能服务器被黑了，有个木马进程占了很大资源。我们想进一步细化分析，究竟为啥mysql占的资源特别大？这个木马进程都干了什么坏事？这时候祭出strace神器就ok了。

我们前面说了strace有统计参数，最简单就是-c参数，对一个进程加-c参数，strace会统计程序系统调用的统计。会统计那些项呢？我们上面介绍-c参数时候说了，有系统调用、耗时、和错误次数。

统计mysql的调用如下图：

看出来系统调用主要是调用nmap，这是和内存有关的。可以明确mysql主要在做内存操作。

我们再通过Pid动态跟踪下，执行-c -p Pid 一段时间，ctrl+c退出，就有结果：

可见大部分时间在做pull调用。

3、综合追踪java耗时、内存泄露，debug错误等

1）首先查找最好资源的子进程：

top -H -p `ps aux|perl -lane 'print $F[1] if $F[0]=~/tomcat/'

2）用trace追踪最耗时子进程

strace -p 31164

发现是futex进程同步线程时候，有大量链接超时。

3）结合jstack 追踪代码级别的问题

此子进程转化为16进制，然后用jstack 分析，并搜索这个子进程的16进制,得到具体VM的具体debug信息，从而进一步做代码排查。

好了，其实 strace有更多的扩展应用，网上有很多文章介绍可供学习参考。当然你可以根据自己实际的环境进一步深挖，发现更大的宝藏。

jstack使用方法参考

tomcat+java的web程序持续占cpu高问题调试【转】 - paul_hch - 博客园 http://www.cnblogs.com/paul8339/p/7144736.html

Java线上应用故障排查之一：高CPU占用【转】 - paul_hch - 博客园 http://www.cnblogs.com/paul8339/p/7464206.html

Java线上应用故障之CPU占用高排查与定位 - paul_hch - 博客园 http://www.cnblogs.com/paul8339/p/7591226.html

转自

「安全工具」linux动态追踪神器——Strace实例介绍 https://www.toutiao.com/i6521168589418922504/