讲师中心 微信公众号

工具推荐

视频效率加速
updream

一键生成高质量推广成片

AniShort
AniShort

AI短剧协同制作平台

Laper
Laper

剧本策划到成片协作

剧云
剧云

中文短剧剧本制作平台

进程管理中怎么利用fio或dd压测期间配合pidstat -d全面评估特定存储跑批进程的I/O占有率和延迟

秋萱君_6000

秋萱君_6000

发布时间:2026-07-29 10:15:51

|

317人浏览过

|

来源于php中文网

原创

fio用于模拟真实业务压力(如跑批的大文件顺序写+随机读),输出IOPS、平均及99%延迟;dd用于快速验证磁盘裸带宽上限,绕过缓存直测硬件性能,二者分工协作而非替代。

进程管理中怎么利用fio或dd压测期间配合pidstat -d全面评估特定存储跑批进程的i/o占有率和延迟

压测期间想看清某个跑批进程真实占了多少磁盘IO、有没有被拖慢,不能只看整体吞吐,得把工具串起来用——fio/dd负责“施压”,pidstat -d负责“盯人”,再补上延迟感知,才算闭环。

fio/dd选哪个?按目标定

fio和dd不是替代关系,是分工关系:

  • fio:模拟真实业务压力,比如跑批常有的“大文件顺序写+少量随机读”或“高并发小块日志追加”。能输出IOPS、平均延迟(lat)、99%延迟(clat),适合评估服务在压力下的响应质量。例如:
    fio --name=batch-write --ioengine=libaio --direct=1 --bs=128k --rw=write --size=4G --runtime=120 --time_based --group_reporting
  • dd:快速验证存储裸带宽上限,绕过缓存直打设备。适合排除硬件瓶颈,但不反映应用行为。例如:
    dd if=/dev/zero of=/data/batch.tmp bs=4M count=2048 oflag=direct conv=fdatasync(加conv=fdatasync确保落盘,更贴近跑批刷盘动作)

pidstat -d 必须这样用才准

光输pidstat -d 1容易漏关键信息,尤其对长时间运行的跑批进程:

  • 先用pgrep -f "batch_runner\|python.*etl"精准抓PID,避免ps grep误匹配;
  • 执行pidstat -d 2 -p $(pgrep -f batch_runner) 5:采样间隔2秒,共5次,既避开瞬时抖动,又防止终端刷屏;
  • 紧盯rkB/s和wkB/s两列——它们是每秒真实读写量(KB),不是累计值;
  • 如果该进程wkB/s长期稳定在20MB/s,而fio测出磁盘能跑400MB/s,说明瓶颈不在磁盘,可能卡在应用层刷盘逻辑或锁竞争。

延迟怎么补?单靠pidstat不够

pidstat -d本身不报延迟,但能帮你定位延迟来源:

  • 当wkB/s不高,但任务耗时飙升,立刻查iostat -dx 1中的await(平均IO等待毫秒)和svctm(实际服务时间)。若await >> svctm,说明队列积压,进程在等IO;
  • 配合iotop -oPa看该进程是否频繁触发D状态(不可中断睡眠),这是内核级IO阻塞的直接信号;
  • 若fio报告clat (usec): min=120, max=28000, avg=1560,而pidstat显示进程wkB/s只有理论值1/5,大概率是应用同步写+小buffer导致大量短IO堆积,而非磁盘慢。

实操注意三个坑

很多问题出在操作细节:

  • 别在压测中途改缓存策略:测试前执行echo 3 | sudo tee /proc/sys/vm/drop_caches清空页缓存,否则dd/fio结果含缓存干扰;
  • 跑批进程要带cgroup限制再测:如果它运行在system.slice或自定义cgroup里,pidstat看到的是宿主机视角IO,需用cat /sys/fs/cgroup/io.stat对照验证是否被限速;
  • 避免用pidstat -d 0:这会让采样频率失控,不仅看不到趋势,还可能拖慢被监控进程本身。

热门AI工具

更多
花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

457

2023.08.15

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

1020

2023.09.08

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

3732

2023.09.19

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

1216

2023.10.09

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

1089

2023.10.17

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

574

2023.10.17

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

3456

2023.10.18

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

6592

2023.10.20

GoFrame框架Web开发与路由中间件
GoFrame框架Web开发与路由中间件

本专题聚焦GoFrame框架的Web开发,拆解路由注册与匹配规则、请求参数获取、参数校验与中间件执行顺序,说明统一响应、JWT鉴权、文件上传与接口文档生成的落地方式,并补充优雅重启与测试实践。

20

2026.11.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Revel 官方 Deployment 文档
Revel 官方 Deployment 文档

共0课时 | 0人学习

Uvicorn官方部署指南
Uvicorn官方部署指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn