fio用于模拟真实业务压力(如跑批的大文件顺序写+随机读),输出IOPS、平均及99%延迟;dd用于快速验证磁盘裸带宽上限,绕过缓存直测硬件性能,二者分工协作而非替代。

压测期间想看清某个跑批进程真实占了多少磁盘IO、有没有被拖慢,不能只看整体吞吐,得把工具串起来用——fio/dd负责“施压”,pidstat -d负责“盯人”,再补上延迟感知,才算闭环。
fio/dd选哪个?按目标定
fio和dd不是替代关系,是分工关系:
-
fio:模拟真实业务压力,比如跑批常有的“大文件顺序写+少量随机读”或“高并发小块日志追加”。能输出IOPS、平均延迟(lat)、99%延迟(clat),适合评估服务在压力下的响应质量。例如:
fio --name=batch-write --ioengine=libaio --direct=1 --bs=128k --rw=write --size=4G --runtime=120 --time_based --group_reporting -
dd:快速验证存储裸带宽上限,绕过缓存直打设备。适合排除硬件瓶颈,但不反映应用行为。例如:
dd if=/dev/zero of=/data/batch.tmp bs=4M count=2048 oflag=direct conv=fdatasync(加conv=fdatasync确保落盘,更贴近跑批刷盘动作)
pidstat -d 必须这样用才准
光输pidstat -d 1容易漏关键信息,尤其对长时间运行的跑批进程:
- 先用
pgrep -f "batch_runner\|python.*etl"精准抓PID,避免ps grep误匹配; - 执行
pidstat -d 2 -p $(pgrep -f batch_runner) 5:采样间隔2秒,共5次,既避开瞬时抖动,又防止终端刷屏; - 紧盯
rkB/s和wkB/s两列——它们是每秒真实读写量(KB),不是累计值; - 如果该进程
wkB/s长期稳定在20MB/s,而fio测出磁盘能跑400MB/s,说明瓶颈不在磁盘,可能卡在应用层刷盘逻辑或锁竞争。
延迟怎么补?单靠pidstat不够
pidstat -d本身不报延迟,但能帮你定位延迟来源:
- 当
wkB/s不高,但任务耗时飙升,立刻查iostat -dx 1中的await(平均IO等待毫秒)和svctm(实际服务时间)。若await >> svctm,说明队列积压,进程在等IO; - 配合
iotop -oPa看该进程是否频繁触发D状态(不可中断睡眠),这是内核级IO阻塞的直接信号; - 若fio报告
clat (usec): min=120, max=28000, avg=1560,而pidstat显示进程wkB/s只有理论值1/5,大概率是应用同步写+小buffer导致大量短IO堆积,而非磁盘慢。
实操注意三个坑
很多问题出在操作细节:
-
别在压测中途改缓存策略:测试前执行
echo 3 | sudo tee /proc/sys/vm/drop_caches清空页缓存,否则dd/fio结果含缓存干扰; -
跑批进程要带cgroup限制再测:如果它运行在
system.slice或自定义cgroup里,pidstat看到的是宿主机视角IO,需用cat /sys/fs/cgroup/io.stat对照验证是否被限速; -
避免用
pidstat -d 0:这会让采样频率失控,不仅看不到趋势,还可能拖慢被监控进程本身。

















