麒麟系统I/O瓶颈需用iostat、iotop、pidstat协同诊断:iostat -xdm 1查%util>80%及r_await/w_await>10ms确认设备级瓶颈;iotop -o -d 1定位高IO进程;pidstat -d 1分析进程级读写分布与等待特征。

您在麒麟OS中观察到系统响应迟滞、iostat显示r_await或w_await持续高于10ms、iotop里IO列数值异常飙升,说明磁盘I/O请求正在排队等待服务,必须立即定位是设备瓶颈、进程滥用还是调度策略失配。
确认I/O高等待是否真实存在
先排除监控误报或瞬时抖动。打开终端,执行:iostat -xdm 1,连续观察5秒以上。若%util稳定在80%以上,且r_await或w_await任一值反复突破15ms(非单次尖峰),即确认为真实I/O等待问题。注意:若%util始终低于30%但await很高,说明不是磁盘忙,而是请求路径卡在驱动、队列或文件系统层。
此时不要直接杀进程或重启服务——【await高而util低,极大概率是ext4日志阻塞或jbd2线程夯住,而非磁盘硬件问题】。
定位高I/O消耗的进程与线程
当iostat已确认存在I/O压力后,必须立刻找出“谁在堵路”。执行:sudo iotop -o -d 1。-o参数过滤静默进程,确保只看到真实刷盘的程序。
界面默认按IO>列降序排列,重点关注三类目标:
① 持续写入超过20MB/s的用户进程(如rsync、mysqldump、java应用日志刷盘);
② 名为jbd2/devname-8的内核线程——这是ext4日志提交线程,若其IO>持续占满一行且伴随高await,说明挂载点正承受大量小文件同步写;
③ kworker/u*:xxx类线程若IO偏高,往往指向NVMe驱动中断处理异常或SCSI超时重试风暴。
按P键切换至线程视图,可精确识别是主线程还是某子线程在猛刷磁盘。
分析进程级I/O行为与等待特征
iotop只能看带宽,pidstat能揭示更深层的I/O质量。执行:pidstat -d 1,每秒输出各进程读写吞吐(KB_rd/s、KB_wr/s)及IO等待时间(%iowait)。
重点筛查:
方法一:找%wait_time异常高的进程——若某PID连续3次采样中%wait_time > 60%,说明该进程90%以上时间在等磁盘响应,基本可判定为I/O敏感型业务(如数据库事务提交)或遭遇锁竞争;
方法二:查KB_wr/s突增但KB_rd/s几乎为0的进程——典型日志追加场景,需检查其是否调用fsync()或O_SYNC标志;
方法三:发现多个进程同时对同一块设备(如sda)发起高IO,但各自KB_wr/s仅5–10MB/s——这往往是元数据操作密集导致,比如大量mkdir、unlink或ext4目录项更新,此时jbd2必然高负载。
验证I/O调度器是否匹配设备类型
选错调度器会让SSD表现得像HDD,让NVMe吞吐腰斩。先确认设备属性:
执行:cat /sys/block/sda/queue/rotational,返回1是HDD,0是SSD/NVMe;
再查当前调度器:cat /sys/block/sda/queue/scheduler,方括号内为生效项。
匹配规则如下:
— HDD设备:应为bfq(若内核支持)或mq-deadline;
— SATA SSD:必须为mq-deadline,bfq会引入额外延迟;
— NVMe设备:必须为none,设为其他任何值均强制绕过内核调度层,反而引发请求堆积。
临时切换命令(以sda为例):
SSD:sudo sh -c 'echo mq-deadline > /sys/block/sda/queue/scheduler'
NVMe:sudo sh -c 'echo none > /sys/block/nvme0n1/queue/scheduler'
执行后再次运行cat /sys/block/sda/queue/scheduler,必须看到新调度器被方括号包裹,否则修改失败。
检查ext4日志与元数据健康度
当jbd2线程持续高IO且await飙升,问题常不在磁盘本身,而在日志提交机制异常。第一步:确认对应挂载点是否启用data=ordered以外的模式。
执行:mount | grep sda1(替换为实际分区),查看挂载参数中是否有data=writeback或journal=ordered。若出现data=writeback,会导致元数据不一致风险上升,且jbd2负载不可控。
第二步:检查日志区是否损坏。运行:sudo dumpe2fs -h /dev/sda1 | grep -i "journal",确认Journal inode存在且状态正常。
第三步:若怀疑日志头损坏,可强制重建:sudo tune2fs -j /dev/sda1——此操作不格式化,仅重置日志结构,适用于journal failed类错误。

















