讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么解决HBA卡物理掉线导致系统挂起卡住一分钟的问题

老晨姑娘_1670

老晨姑娘_1670

发布时间:2026-11-04 13:08:28

|

704人浏览过

|

来源于php中文网

原创

Linux启动因HBA设备超时卡住90秒,本质是systemd等待离线SAN存储设备就绪;应先用dmesg确认FC链路状态,再通过rd.timeout内核参数或device覆盖配置缩短等待,同时排查光纤、SFP模块及HBA驱动等物理层问题。

linux怎么解决hba卡物理掉线导致系统挂起卡住一分钟的问题

systemd 等待 HBA 设备超时卡住 90 秒

Linux 启动或运行中因 HBA 卡物理掉线(如光纤松动、SFP 模块异常、存储链路中断)导致系统 hang 住约 60–90 秒,本质是 systemd 在等待某个依赖的 dev-sdX.device(比如挂载点指向 SAN 存储的 LUN)就绪,而该设备已离线但未被及时标记为“失败”。默认超时值为 90 秒,期间控制台卡在 A start job is running for dev/sdc.device 类提示上。

这不是“系统崩溃”,而是 systemd 主动阻塞——它在等一个永远不会回来的设备。重启能恢复,是因为重新协商了 FC 链路、清空了内核 SCSI 层的 pending I/O 状态,掩盖了底层物理不稳的问题。

  • 先确认是否真由 HBA 引起:启动卡住时,切到 tty2(Ctrl+Alt+F2),执行 dmesg -T | grep -i "scsi\|fc\|hba",看是否有 FC link down、device not ready、timed out 或反复重试的 SCSI 错误
  • 检查 HBA 当前状态:cat /sys/class/fc_host/host*/port_state 应为 Online;若为 Linkdown 或 Unknown,说明物理链路已断
  • 不要直接禁用设备单元:盲目执行 systemctl disable dev-sdc.device 会破坏挂载依赖,可能导致根文件系统无法挂载

缩短或跳过 HBA 设备等待时间

核心不是让 systemd “更快失败”,而是让它“不等”——前提是该设备非系统必需(如仅用于备份卷、数据盘)。关键修改点在内核启动参数和 systemd unit 覆盖配置。

  • 临时绕过(单次生效):GRUB 启动时按 e 编辑,找到 linux 行末尾,追加 rd.timeout=30(适用于 dracut)或 systemd.unit=multi-user.target systemd.default_timeout_start_sec=30,然后 Ctrl+X 启动
  • 永久生效(推荐):编辑 /etc/default/grub,在 GRUB_CMDLINE_LINUX 中加入 rd.timeout=15(RHEL/CentOS/Fedora)或 rootdelay=15(Debian/Ubuntu),再运行 update-grub 或 grub2-mkconfig -o /boot/grub2/grub.cfg
  • 对特定设备跳过等待:创建覆盖文件 /etc/systemd/system/dev-sdc.device.d/timeout.conf,内容为:
    [Unit]\nStartLimitIntervalSec=0\n[Service]\nType=oneshot\nExecStart=/bin/sh -c 'exit 0'
    —— 这会让 systemd 认为此设备“立即就绪”,绕过实际探测

HBA 卡物理层必须排查的三件事

缩短超时只是应急,真正要解决的是“为什么掉线”。HBA 物理掉线极少是软件问题,90% 以上源于以下环节:

Linux Security Scanner
Linux Security Scanner

Linux 安全审计工具,检查 SSH 配置、开放/监听端口、防火墙规则(ufw/iptables/nftables)、失败登录尝试、sudoers 权限...

下载
  • 光纤连接:拔插一次 SFP 模块,检查 LC 接口是否有灰尘(用专用清洁笔)、光纤弯曲半径是否
  • HBA 固件与驱动版本:执行 systool -c fc_host -v | grep firmware 查固件版本,对比厂商官网是否为最新;老固件在链路抖动时易进入 recovery loop
  • 存储侧端口状态:登录光纤交换机,查对应 port 的 errshow(Brocade)或 porterrshow(Cisco MDS),重点关注 link_fails、loss_of_sync、prim_seq_err 计数是否持续增长

注意:lspci -vv -s $(lspci | grep -i "fibre\|hba" | head -n1 | awk '{print $1}') 可看到 HBA 的 Link Status 和 Speed,如果显示 LinkDown 或 2.5Gb/s(而预期是 8/16/32G),基本可锁定物理层问题。

避免应用层被 HBA 掉线拖垮

即使你调低了 systemd 超时,若业务进程(如数据库、备份脚本)直接读写该 HBA 挂载的路径,仍可能因 I/O hang 住整个进程。必须做隔离:

  • 挂载选项加固:在 /etc/fstab 中对该设备使用 noauto,x-systemd.device-timeout=10,_netdev,soft,intr,rsize=65536,wsize=65536(NFS)或 _netdev,x-systemd.device-timeout=10,defaults(本地 SCSI),其中 _netdev 告诉 systemd 这是网络/外部设备,x-systemd.device-timeout 控制挂载超时
  • 禁止关键服务强依赖:不要把 /var/lib/mysql 或 /opt/app/data 直接建在 HBA 映射盘上;应通过 LVM 逻辑卷 + lvchange -an 实现快速脱钩,或改用集群文件系统(如 GFS2)支持故障自动剔除
  • 监控链路存活:写个简单脚本每 5 分钟执行 cat /sys/class/fc_host/host*/port_state | grep -q "Online",失败则发告警,比等系统卡住再处理更主动

最常被忽略的一点:HBA 掉线后,内核 SCSI 层可能残留大量 blocked 状态的请求,echo 1 > /sys/block/sdc/device/delete 手动删除设备节点虽能释放,但会丢失未完成 I/O——务必确保上层应用已停止访问,否则可能引发数据损坏。

热门AI工具

更多
VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4390

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3693

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2953

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

7310

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

6942

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3973

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

3445

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

3699

2023.07.25

Docker Desktop怎么设置端口映射
Docker Desktop怎么设置端口映射

本专题聚焦Docker Desktop容器端口映射与访问配置,整理从创建容器、设置端口绑定到验证本地服务访问的操作流程。针对端口被占用、映射配置错误、容器服务无法访问等情况,也提供相应的检查方向,方便用户完成端口配置。

0

2026.11.03

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
光速学会docker容器
光速学会docker容器

共33课时 | 3万人学习

Docker 17 中文开发手册
Docker 17 中文开发手册

共0课时 | 0人学习

Docker 教程
Docker 教程

共19课时 | 29.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn