讲师中心 微信公众号
AI工具推荐 视频效率加速

大量脏页导致写入卡顿但 iostat 看不出哪个盘特别忙的排查

酷静酱_9777

酷静酱_9777

发布时间:2026-01-19 18:07:17

|

726人浏览过

|

来源于php中文网

原创

脏页堆积导致写入卡顿但iostat显示磁盘正常,说明问题在内核页缓存回写调度或存储栈上层阻塞,需通过/proc/meminfo、回写线程stack、/proc/diskstats及iotop等深入定位根因。

大量脏页导致写入卡顿但 iostat 看不出哪个盘特别忙的排查

脏页堆积引发写入卡顿,但 iostat 显示各磁盘 I/O 利用率(%util、await、r/s、w/s)都正常——这说明问题不在设备层吞吐瓶颈,而在内核页缓存回写调度或存储栈上层阻塞。关键要跳出“看 iostat 找忙盘”的惯性,转向内存子系统和块层队列行为分析。

确认脏页规模和回写压力

先验证是否真由脏页驱动:运行 cat /proc/meminfo | grep -E "Dirty|Writeback|Bounce",重点关注:

  • Dirty:当前未写回的脏页大小(KB),持续 > 10% 的可用内存(MemFree + Cached + SReclaimable)就属异常
  • Writeback:正在被 pdflush/kswapd 写出的页数,若长期 > 0 且 Dirty 不降,说明回写线程卡住
  • DirtyRatio / DirtyBackgroundRatio(查 /proc/sys/vm/dirty_*):若 Dirty 接近 DirtyRatio(默认 20%),内核会同步阻塞 write() 系统调用,直接导致应用卡顿

检查回写线程状态和阻塞点

脏页不落盘,往往不是磁盘慢,而是回写路径被阻塞:

Rydberg Agent Node
Rydberg Agent Node

使用一条命令部署ProbeChain Rydberg测试网代理节点。自动注册为Agent(NodeType=1),免gas,支持macOS/Linux/Windows。触发词:/r

下载
  • 用 ps aux | grep "[k]worker.*writeback" 或 pgrep -f "kworker.*writeback" 找出回写工作线程 PID
  • 对 PID 执行 cat /proc/$PID/stack,看是否卡在:
    `blk_mq_get_tag` → `sbitmap_queue_wait`(块层 tag 耗尽,常因 NVMe 多队列或 SCSI 中断风暴)
    `ext4_writepages` → `ext4_io_submit` → `submit_bio`(文件系统层提交 BIO 卡住)
    `wait_on_page_writeback`(等待某页写回完成,可能该页所属 inode 正被锁住)
  • 同时执行 cat /proc/diskstats,对比各设备的 in_flight 字段(第10列):若某盘 in_flight 持续 > 0 但 iostat 无 I/O,说明请求卡在队列里没下发,而非设备处理慢

定位具体阻塞设备或路径

iostat “不忙”可能是采样粒度太粗或统计口径偏差,需更底层观测:

  • 用 iotop -o -a(-o 只显示有 I/O 的进程,-a 累计 I/O)看哪些进程在持续 submit bio,尤其是 kswapd、ksmd、pdflush 或业务进程自身
  • 启用 block trace:echo 1 > /sys/block/$DEV/queue/iostats(确保开启),再用 cat /sys/block/$DEV/stat 查看更细粒度:第9列(# of reads merged)、第13列(# of writes merged)突增,说明 bio 合并失败,常因文件系统碎片或块层限流;第10列(# of I/Os currently in progress)高而第11列(time in queue)低,说明请求在队列中等待调度
  • 若使用 LVM 或 mdadm,检查底层物理盘:lvs -o +stripes,stripesize 或 mdadm -D /dev/mdX,条带配置不合理(如 stripe size 过小)会导致大量小写无法合并,触发高频脏页回写

临时缓解与根因收敛

应急可降低脏页触发阈值,避免同步阻塞:

  • echo 5 > /proc/sys/vm/dirty_ratio(激进,慎用)
  • echo 2 > /proc/sys/vm/dirty_background_ratio(让后台回写更早启动)
  • echo 1000 > /proc/sys/vm/dirty_expire_centisecs(缩短脏页存活时间)

但根本解决需结合 stack 和 iostats 定位到具体模块:是 ext4 journal 阻塞?NVMe 控制器中断丢失?还是 cgroup blkio 限流导致队列积压?找到 stack 中最深的非通用函数(如 nvme_queue_rq、dm_table_presuspend_targets),即为根因所在模块。

热门AI工具

更多
SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

相关专题

更多
堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

5227

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2308

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

5227

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2308

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3858

2023.08.10

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

0

2026.10.08

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

120

2026.09.30

LLVM RISC-V参数配置教程
LLVM RISC-V参数配置教程

本专题介绍LLVM对RISC-V基础ISA和扩展的支持方式,涵盖RV32、RV64、标准扩展、实验性扩展、厂商扩展、-menable-experimental-extensions和版本差异。

100

2026.09.30

LLVM IR中间表示入门指南
LLVM IR中间表示入门指南

本专题整理LLVM IR的核心概念,包括中间表示作用、模块结构、函数、基本块、SSA形式、类型系统和常见语法,帮助新手理解LLVM编译流程中的关键层。

80

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WebSocket手册
WebSocket手册

共0课时 | 0人学习

HTML5/CSS3/JavaScript/ES6入门课程
HTML5/CSS3/JavaScript/ES6入门课程

共102课时 | 10.8万人学习

前端基础到实战(HTML5+CSS3+ES6+NPM)
前端基础到实战(HTML5+CSS3+ES6+NPM)

共162课时 | 28.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn