讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在Linux下排查由于NFS网络存储挂起导致进程陷入Uninterruptible Sleep(D状态)并演变为僵尸的重灾区

秋萱吖_2835

秋萱吖_2835

发布时间:2026-05-28 06:30:36

|

762人浏览过

|

来源于php中文网

原创

NFS挂起引发D状态进程及僵尸进程,本质是等待链断裂导致的资源阻塞连锁反应;需三步排查:定位现象(ps/df/mount)、确认根因(showmount/ping/telnet/dmesg)、止血缓解(umount -f -l、killall -9 rpciod),并优化挂载参数如hard,intr,timeo=10,retrans=3。

如何在linux下排查由于nfs网络存储挂起导致进程陷入uninterruptible sleep(d状态)并演变为僵尸的重灾区

遇到NFS挂起引发的D状态进程,甚至进一步拖垮系统、诱发僵尸进程(Z状态),本质是“等待链”断裂:一个进程卡在NFS I/O上(D),它的子进程或依赖它的服务无法继续推进,最终可能因父进程异常而变成Z。这不是单一进程问题,而是资源阻塞的连锁反应。排查需从现象定位、根因确认到缓解止血三步走,重点盯住NFS客户端行为和挂载配置。

快速识别NFS引发的D状态

先确认D进程是否真由NFS驱动:

  • 用 ps -eo pid,wchan,comm,state | grep ' D ' 查看所有D状态进程,并关注其 wchan(等待的内核函数)。若大量进程停在 rpc_execute、__wait_event 或 nfs_wait_bit_killable,基本可锁定NFS
  • 执行 df -h 或 ls /mnt/nfs-mount —— 若命令本身卡住且状态变D,说明该挂载点已失联
  • 检查 mount | grep nfs,确认是否使用了默认 hard 挂载,且未启用 intr 或 soft

验证NFS服务器与网络连通性

D状态本身不报错,但底层必然存在通信失败:

linux-performance-analyzer
linux-performance-analyzer

Linux 性能分析与调优专家,覆盖 CPU、内存、磁盘 I/O、网络、内核参数、编译优化、容器/K8s。适用场景:系统卡顿/高负载、内存不足/OOM/Swap 高、CPU 异常/iowait 高。

下载
  • 用 showmount -e nfs-server-ip 测试NFS服务端是否响应;若超时或拒绝连接,说明服务宕机或防火墙拦截
  • 用 ping nfs-server-ip 和 telnet nfs-server-ip 2049(NFS端口)确认基础网络可达
  • 查看 dmesg -T | tail -30,搜索关键词如 "nfs"、"RPC"、"timeout"、"server not responding",常有明确提示

终止阻塞并防止僵尸蔓延

NFS D进程无法被kill -9终止,但可切断其依赖链:

  • 强制卸载异常挂载:umount -f -l /mnt/bad-nfs(-f 强制,-l 懒卸载)。这不会立即唤醒D进程,但能阻止新请求进入,为后续恢复争取时间
  • 重启NFS客户端核心线程:killall -9 rpciod。rpciod是NFS RPC调用的后台工作线程,杀掉后会自动重启,多数卡在rpc_execute的D进程会随之退出(注意:此操作不影响已挂载的NFS数据一致性,但正在写的文件可能出错)
  • 避免僵尸堆积:若D进程的父进程(如shell脚本、监控agent)也因等待而僵死,它可能无法回收子进程退出状态。此时应尽快重启该父进程,或手动用 kill -CONT 尝试唤醒(仅对T状态有效),对Z进程则需父进程调用wait()——若父进程已不可控,唯一办法是重启父进程或整个服务单元

长期规避:重配NFS挂载参数

预防胜于救治,关键在挂载选项:

  • 生产环境禁用纯 hard 默认挂载。改用:hard,intr,timeo=10,retrans=3 —— intr 允许信号中断等待,timeo 控制每次RPC超时(分10),retrans 限制重试次数(3次后报错)
  • 对非关键数据,可考虑 soft 挂载,但需应用层处理I/O错误(返回EIO),避免静默失败
  • 添加 bg(后台重试)选项,让挂载失败时不阻塞启动流程;配合 retry=60 设置重试间隔

热门AI工具

更多
墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

417

2023.08.15

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

840

2023.09.08

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2452

2023.09.19

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

836

2023.10.09

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

729

2023.10.17

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

374

2023.10.17

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2196

2023.10.18

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

4052

2023.10.20

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

60

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn