Linux strace 命令完全指南：系统调用调试从入门到精通

# Debian / Ubuntu
sudo apt update && sudo apt install strace -y

# RHEL / CentOS / Rocky Linux
sudo yum install strace -y
# 或
sudo dnf install strace -y

# 验证安装
strace --version

# 追踪 ls 命令的系统调用
strace ls

# 追踪 ls 并显示系统调用的耗时
strace -T ls

# 只显示失败的调用（返回值非0）
strace -e trace=openat ls /tmp

# 追踪 PID 为 1234 的进程
strace -p 1234

# 同时追踪主进程和所有子线程
strace -p 1234 -f

# 只追踪文件相关系统调用
strace -e trace=file ls

# 只追踪网络相关系统调用
strace -e trace=network curl https://example.com

# 只追踪进程控制相关（fork/exec/exit 等）
strace -e trace=process nginx

# 只追踪特定系统调用（可指定多个，用逗号分隔）
strace -e trace=read,write,openat,close python3 script.py

# 排除某些系统调用
strace -e trace=\!write,read ls

# 只追踪涉及特定文件描述符的调用（strace 4.26+）
strace -e trace=all -y ls /

# 让 Nginx 重新加载配置
strace -e trace=openat,stat,newfstatat -p $(pgrep -o nginx) -o /tmp/nginx-strace.log &
kill -HUP $(pgrep -o nginx)

# 查看实际读取了哪些配置文件
grep "nginx\.conf\|\.conf" /tmp/nginx-strace.log | grep "= 3"

# 使用 -T 选项显示每次调用的耗时
strace -T -o /tmp/slow.log some-command

# 找出最耗时的系统调用
awk -F'[<>]' '{print $2, $0}' /tmp/slow.log | sort -rn | head -10

# 只关注失败的系统调用
strace -e trace=file -o /tmp/perm.log command-that-fails

# 只提取返回值失败的调用
grep "= -1" /tmp/perm.log

# 统计模式
strace -c -o /tmp/stats.log curl https://example.com

# 输出示例
% time     seconds  usecs/call     calls    errors syscall
------ ----------- ----------- --------- --------- ----------------
 35.12    0.045213          12      3769           poll
 28.45    0.036612           9      4068           clock_gettime
 15.30    0.019689          15      1312           recvfrom
 12.10    0.015572           8      1946           write
  4.50    0.005791           3      1930           read

# 追踪 Nginx worker，输出到单独文件，包含子进程和时间戳
strace -ff -tt -o /tmp/nginx_trace -p $(pidof nginx | awk '{print $1}') &
sleep 5
kill %1

# 查看 worker 进程输出
ls -la /tmp/nginx_trace*

# 显示前 4096 字节
strace -s 4096 python3 -c "print('A'*1000)"

# 查看完整的数据内容
strace -s 0 -e trace=write python3 app.py  
# -s 0 表示不截断字符串（显示完整内容）

# 先看系统调用
strace -c curl https://example.com

# 再看库函数调用（需安装 ltrace）
ltrace -c curl https://example.com

# 获取容器内进程 PID（在宿主机上）
CONTAINER_PID=$(docker inspect --format '{{.State.Pid}}' container_name)

# 在宿主机上追踪
sudo strace -p $CONTAINER_PID -f -o /tmp/docker-trace.log

#!/bin/bash
# auto-strace.sh - 自动诊断工具
SERVICE=$1
PID=$(pgrep -o "$SERVICE")

if [ -z "$PID" ]; then
    echo "服务 $SERVICE 未运行"
    exit 1
fi

echo "正在追踪 $SERVICE (PID: $PID)..."

# 阶段1：快速统计（10秒）
strace -c -p $PID -o /tmp/strace_stats_$$.log &
STATS_PID=$!
sleep 10
kill $STATS_PID 2>/dev/null

# 阶段2：只记录失败的系统调用（20秒）
strace -e trace=all -p $PID -o /tmp/strace_errors_$$.log &
ERROR_PID=$!
sleep 20
kill $ERROR_PID 2>/dev/null

echo "诊断完成！"
echo "统计报告: /tmp/strace_stats_$$.log"
echo "错误日志: /tmp/strace_errors_$$.log"

# 提取失败调用
grep "= -1" /tmp/strace_errors_$$.log | head -20