讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么排查系统日志报I/O error硬件故障

大墨吖_8822

大墨吖_8822

发布时间:2026-10-16 08:19:06

|

565人浏览过

|

来源于php中文网

原创

dmesg 是诊断 I/O 错误的第一入口,需重点抓取 Buffer I/O error、blk_update_request、ATA/NVMe/SCSI 层错误;结合 smartctl -a 检查重映射扇区、待处理扇区及链路错误;确认是否只读挂载导致假性报错;再用 iotop/lsof 排除进程干扰,警惕老化指标隐性风险。

linux怎么排查系统日志报i/o error硬件故障

dmesg 是第一入口,报 Input/output error 不能只看应用层提示,得立刻下钻到内核设备交互现场。硬件故障的线索几乎全藏在 dmesg 里,而不是 journalctl 或 /var/log/messages。

盯住 dmesg 里这几类关键错误模式

执行 dmesg | grep -i "error\|fail\|timeout\|i/o\|buffer",重点识别以下输出:

  • Buffer I/O error on device sda1, logical block 123456:明确指向分区和扇区,是后续验证物理坏道的坐标
  • end_request: I/O error 或 blk_update_request: critical target error:块层已无法完成请求,问题大概率在硬件或驱动层
  • ata1.00: failed command: READ FPDMA QUEUED:SATA控制器报错,优先查线缆、电源、固件
  • nvme 0000:01:00.0: controller is down:NVMe控制器掉线,需查 PCIe 链路状态、温度、BIOS NVMe 支持设置
  • sd 0:0:0:0: SCSI error: returncode = 0x08000002:SCSI 层返回介质错误,常伴随 Sense Key: Medium Error

注意:如果同一扇区(如反复出现 logical block 123456)持续报错,基本可判定是物理损坏起点;若错误位置完全随机,更可能是链路或调度问题。

用 smartctl 验证硬盘健康,别跳过 -a 参数

smartctl -a /dev/sdx 输出里的字段不是全都要看,只盯这三项:

  • Reallocated_Sector_Ct > 0:已有扇区被重映射,物理坏道已存在
  • Current_Pending_Sector > 0:有扇区读取失败但尚未重映射,硬盘正处在失效临界点
  • UDMA_CRC_Error_Count 或 Link_Up_Count 异常波动:说明数据线接触不良或接口供电不稳,不是盘本身问题

执行前确认设备名准确——lsblk 和 lshw -class disk 比凭经验猜 sda 更可靠。NVMe 盘要用 smartctl -a /dev/nvme0n1,别套用 SATA 命令。

别急着 fsck,先确认是不是只读挂载触发的假性 I/O error

内核检测到 I/O 错误后会自动把文件系统设为只读(ro),此时所有写操作都会报 Input/output error,但磁盘可能还完好。

Zynq Linux Hardware Debug
Zynq Linux Hardware Debug

Zynq‑7000 / Zynq UltraScale+ 硬件调试技能。适用于 Xilinx Zynq(Cortex‑A9/A53 + FPGA)Linux 环境,调试 I2C、I2S、UART、GPIO 等外设。包括设备树配置、内核驱动、用户空间调试工具、交叉编译和常见问题排查,支持 PetaLinux 开发。

下载
  • 运行 mount | grep sdx 查看是否含 ro 标志
  • 检查 dmesg | tail -20 是否有 Remounting filesystem read-only 提示
  • 若确认无硬件报错,可尝试 mount -o remount,rw /dev/sdx1 测试是否恢复
  • 若 remount 失败或立即又变 ro,说明底层错误仍在,必须停止写入并备份

特别注意:ext4 分区在只读状态下仍允许部分元数据更新(如 atime),也可能触发二次错误,所以只要看到 ro 就该默认进入“保护模式”。

交叉验证:用 iotop 和 lsof 排除进程级干扰

硬件故障常被高 IO 进程掩盖,尤其是断电后文件系统元数据混乱时,某些进程会反复重试读写,把偶发错误放大成持续卡死。

  • 运行 iotop -oPa 看哪些进程在持续刷 READ/WRITE,重点关注 D 状态(不可中断睡眠)进程
  • 对疑似进程执行 lsof -p PID,确认它正在访问哪个文件或设备节点
  • 若发现某进程在疯狂读一个明显损坏的文件(如日志轮转残留、数据库 WAL 文件),临时 kill 它可能让系统暂时恢复响应,便于你继续诊断

真正棘手的是那些不暴露在 iotop 里的内核线程(如 kblockd、ksmd),它们的阻塞往往意味着底层设备已失联——这时候 dmesg 里一定有未被 grep 到的控制器超时记录,建议加 -T 参数看时间戳对齐。

最易被忽略的一点:很多工程师查完 smartctl 显示 PASSED 就松口气,但没注意到 Power_On_Hours 已超 50000 小时,或 Temperature_Celsius 长期高于 55°C。硬件老化不是突然发生的,是这些“尚可工作”的指标在悄悄滑坡。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

969

2023.10.18

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2840

2023.10.25

磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4030

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3433

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2613

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

6370

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

6002

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3493

2023.07.20

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

0

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Linux 教程
Linux 教程

共28课时 | 57万人学习

手把手教你玩转Linux视频教程
手把手教你玩转Linux视频教程

共17课时 | 5.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn