执行 sudo iotop -o -P,聚焦 IO> 和 DISK WRITE 两列,按 Shift+P 降序排列,再用 lsof 或 /proc/PID/fd 定位写入文件,容器环境须在宿主机操作。

要快速找出 Linux 系统中正在疯狂读写硬盘的进程,必须绕过静默进程干扰、线程爆炸式展开和权限陷阱,直接定位真实块设备级 I/O 活动。
启动 iotop 并过滤出真正在干活的进程
执行 sudo iotop -o -P,这是唯一能避开干扰的起点。不加 -o 会混入成百上千个空闲进程(如 systemd、sshd),不加 -P 则 Java 或 MySQL 进程会拆成几十个线程平铺在屏幕上,根本无法聚焦。
-o 参数强制只显示「此刻正在向块设备发起读写请求」的进程,不是刚写过、而是正卡在内核 writeback 队列里;-P 参数把同 PID 下所有线程合并为单行,避免被 tid=12345、tid=12346 这类重复项带偏判断。
普通用户运行 iotop 必然全显示 0.00B/s——这不是命令错,是内核硬限制:/proc/[pid]/io 文件仅 root 可读,连 sudo -u nobody 也无效。
看懂界面里最关键的两列
进界面后立刻盯住 IO> 和 DISK WRITE 两列:
IO> 接近 100% 表示该进程大部分时间在等磁盘响应,哪怕 DISK WRITE 只有 200KB/s,也极可能是高频小文件刷盘(比如 DEBUG 日志每秒轮转、InnoDB 的 WAL 写入)。
DISK WRITE 持续 >10MB/s 就值得警惕;若同时 IO> >80%,基本可锁定为瓶颈源。注意 Actual DISK WRITE 远大于 Total DISK WRITE(例如 25MB/s vs 0.85MB/s),说明脏页堆积严重,内核 kworker 即将爆发式刷盘,磁盘延迟马上飙升。
按 Shift+P 切换为按 IO> 降序排列,比默认按带宽排序更能揪出“假低速、真高阻塞”的顽固写盘者。
确认写入目标文件,防止误杀
方法一:用 lsof 定位具体路径
看到高 IO 进程 PID 后,立即执行 sudo lsof -p PID | grep -E "(REG|DEL).*w",重点关注 NAME 列带 w 权限的 REG(普通文件)或 DEL(已删但 fd 未关)。NAME 末尾标 (deleted) 的文件,磁盘空间不会释放,必须 kill 对应进程才能腾出空间。
方法二:直查 /proc/PID/fd 符号链接
运行 sudo ls -l /proc/PID/fd/ | grep -v "socket\|anon_inode",比 lsof 更底层、更少误判。如果输出里大量指向 /var/log/xxx 或 /data/mysql/ib_logfile0,就印证了日志刷盘或数据库 WAL 写入行为。
注意:容器环境必须在宿主机执行上述命令,且 PID 是宿主机视角的数字;若容器用了 --pid=host 以外的 namespace,/proc/PID/fd 可能不可见。
脚本化采集防翻车
第一步:确认当前 iotop 版本与列顺序
运行 iotop --version 和 iotop -h,新版(如 1.3+)IO> 多在第 11 列,老版本可能在第 10 列。字段偏移不查清,awk 脚本必漏报。
第二步:用 batch 模式抓一次快照
执行 sudo iotop -b -n 1 -o -P | awk '$11 ~ /^[0-9.]+$/ && $11 > 5 {print $1, $11, $12}',筛选 IO> 超过 5% 的活跃进程。-b 参数强制非交互,避免 SSH 断连时卡死;-n 1 防止无限等待。
第三步:验证是否真刷盘而非缓存操作
若 IO> 高但 DISK WRITE 极低(如 strace -p PID -e trace=fsync,write,openat 追踪系统调用。


















