perf record -g 采样 Redis 会导致 CPU 异常飙升,主因是 -g 触发高频栈展开中断,尤其高吞吐下开销剧增;应改用 --call-graph dwarf、-F 99 降低干扰,并确保 debuginfo 可用以准确定位真实热点。

直接用 perf record -g 采样 Redis,大概率会误判热点、拉高 CPU、甚至让 Redis 响应变卡——这不是 Redis 慢了,是 perf 自己干的。
为什么 perf record -g 会让 Redis CPU 异常飙升
Redis 是单线程事件驱动模型,高频栈展开(-g 默认用 frame pointer 回溯)在高吞吐下会触发大量内核中断。尤其当每秒处理数万请求时,perf 每次采样都要做完整调用栈解析,CPU 时间大量耗在 unwind_frame 和寄存器保存/恢复上,而非 Redis 逻辑本身。
-
perf record -p $(pgrep redis-server) -g -- sleep 30这类命令极易导致 Redislatency突增、INFO commandstats中instantaneous_ops_per_sec断崖下跌 - 错误归因:
perf report里看到大量__libc_malloc或epoll_wait占比高,不等于 Redis 在疯狂分配内存或卡在 I/O —— 很可能是采样点落在 malloc 内部自旋锁,或 epoll_wait 正常阻塞态被统计为“开销” - 根本原因:Redis 编译默认不带
-fno-omit-frame-pointer,-g依赖的 fp 回溯极易失败,perf会 fallback 到更重的 dwarf 解析,进一步加剧干扰
该用什么参数组合才靠谱
目标不是“采得全”,而是“采得准、干扰小”。关键改三点:调用图方式、采样频率、符号可靠性。
- 用
--call-graph dwarf替代-g:绕过 frame pointer 依赖,对未加编译选项的 Redis 二进制也有效;需确保系统已安装jemalloc-debuginfo(若 Redis 启用 jemalloc)和glibc-debuginfo,否则je_mallocx显示为[unknown] - 采样频率设为
-F 99(≈100Hz):比默认的 ~1KHz 低一个数量级,避免内核采样队列积压;-F 999在生产 Redis 上基本不可用 - 显式指定事件:
-e cycles,instructions比纯cycles更稳,避开 Intel CPU 的硬件节流干扰;IPC(instructions / cycles)低于 0.8 就说明 Redis 频繁等内存,不是 CPU 不够 - 命令示例:
perf record -p $(pgrep redis-server) --call-graph dwarf -F 99 -e cycles,instructions -- sleep 30
perf report 里怎么看才不被误导
perf report 默认聚合方式会把底层库函数开销“摊派”给上层调用者,比如 processCommand 看起来占 40%,实际可能是它调用的 sdsnewlen 或 ziplistPush 在扛压力。
- 必须加
--no-children:看 “Self” 列占比,这才是函数自身执行耗时;若createStringObjectSelf 高,才是真瓶颈;若 Self 低但 Children 高,说明它只是中转,往下钻 - 用
-F symbol,dso区分模块归属:perf report -F symbol,dso --no-children可快速识别是redis-server自身逻辑、libjemalloc.so还是kernel在吃资源 - 别信
epoll_wait占比高:Redis 大部分时间本就该阻塞在这里;真正要警惕的是processCommand、propagate、rdbSaveRio这类用户态函数 Self 占比突增 - 验证是否真热点:跑
perf script | awk '{print $3}' | sort | uniq -c | sort -nr | head -10,看高频符号是否集中在特定命令路径(如zrange→ziplistFind)
容易被忽略的前置条件
没检查这三项,perf 报告基本等于废纸:符号缺失、内核限制、ptrace 被禁。
-
file $(which redis-server)看输出是否含with debug_info;不含就补装对应 debuginfo 包(CentOS:debuginfo-install redis-7.x;Ubuntu:apt install redis-server-dbgsym) -
cat /proc/sys/kernel/perf_event_paranoid必须 ≤ 1;若为 2 或更高,echo 0 | sudo tee /proc/sys/kernel/perf_event_paranoid临时放开 - 容器环境(尤其是 Kubernetes Pod 或 rootless Podman)默认禁用
ptrace,报Operation not permitted就得加--cap-add=SYS_PTRACE或改securityContext - Redis 若启用了
save或aof-rewrite,采样期间可能触发子进程 fork,此时-p指定主进程 PID 仍可,但需注意perf report中出现redis-check-rdb类符号是正常现象
最常被跳过的一步是确认 debuginfo 是否就位——没有符号,perf report 里全是 [unknown] 或十六进制地址,再准的参数也白搭。



















