讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么排查服务器出现大量假死现象的根源

陌婷姑娘_4336

陌婷姑娘_4336

发布时间:2026-10-01 08:40:05

|

399人浏览过

|

来源于php中文网

原创

假死是进程未崩溃但不响应请求的状态,典型表现为R/S状态、kill-0成功但kill-15/9无效、CPU/内存长期为0;需通过ps查STAT与wchan、kill-USR1测试、jstack/jstat分析线程与GC、ss查连接积压、slabtop看内核资源耗尽等分层定位阻塞点。

linux怎么排查服务器出现大量假死现象的根源

假死不是进程死了,而是它还在运行、没崩溃、没退出,但不再响应请求——就像人睁着眼却不动弹。这种状态往往比直接 OOM 更难定位,因为 dmesg 不报错、top 看起来一切正常、日志里也没有明显异常。核心思路是:先确认是否真“假死”,再分层锁定阻塞点,最后看是资源卡住、代码卡住,还是内核卡住。

怎么确认是假死而不是服务宕机

别一上来就重启或杀进程。假死的关键特征是:进程状态为 R(运行中)或 S(可中断睡眠),但无网络响应、无日志输出、HTTP 请求超时、数据库连接 hang 住。

  • 用 curl -I --connect-timeout 2 http://localhost:8080/actuator/health 测试端点是否响应;超时 ≠ 崩溃,更可能是线程阻塞或锁等待
  • 查进程状态:ps -o pid,ppid,stat,comm,wchan -p $PID,重点关注 wchan 列——它显示进程当前在哪个内核函数上等待,比如 ep_poll(卡在 epoll 等待)、futex_wait_queue_me(卡在锁)、do_nanosleep(卡在 sleep)
  • 对比 kill -0 $PID 和 kill -USR1 $PID(对 Java 进程触发线程 dump):如果 kill -0 成功但 USR1 无响应,基本可断定 JVM 线程调度已停滞

Java Spring Boot 服务假死的高频卡点

Spring Boot 假死八成和线程池、连接池、GC 或 native 调用有关,不是内存爆了,而是某条链路彻底堵死。

Browser Setup (No-Root Linux)
Browser Setup (No-Root Linux)

在无 root/sudo 权限的环境(云容器、VPS、隔离主机)中安装并配置 OpenClaw 浏览器工具的 headless Chrome。适用场景:...

下载
  • 检查线程是否耗尽:watch -n1 'jstack $PID | grep \"java.lang.Thread.State\" | wc -l',再配合 jstack $PID | grep -A 10 \"BLOCKED\|WAITING\" 找出被锁住的线程栈
  • 确认数据库连接池是否空转:curl http://localhost:8080/actuator/metrics/datasource.hikari.connections.active,如果 active == max 且 idle == 0,同时 waiting == 非零,说明所有连接都在用,新请求全在排队
  • 看 GC 是否卡住:jstat -gc $PID 1s,若 FGC 持续增长、FGCT 时间飙升,或 G1EvacuationPause 耗时 >5s,说明 GC 线程本身被拖住,JVM 处于“半瘫痪”状态
  • 警惕 DirectByteBuffer 泄漏:jmap -histo $PID | grep DirectByteBuffer,数量持续上涨 + cat /proc/$PID/status | grep VmRSS 明显高于堆大小,大概率是 Netty 或 NIO 导致的堆外内存卡死

Linux 内核层阻塞:别只盯着用户态

有时候应用层一切正常,但整个服务就是不响应——问题可能藏在内核调度、文件系统或网络栈里。

  • 查是否有大量不可中断进程:ps aux | awk '$8 ~ /D/ {print}',状态为 D 的进程无法被信号中断,常见于 NFS 挂载卡死、磁盘 I/O 故障、驱动 hang 住
  • 看 socket 连接是否堆积:ss -s 查总连接数,ss -tnp state established | wc -l 查 ESTABLISHED 数,再比对 /proc/sys/net/core/somaxconn 和应用层 accept 队列长度,若 ss -ln sport = :8080 显示 Recv-Q 持续 >0,说明连接积压在内核 backlog,accept 线程没在消费
  • 检查 page cache 是否失控:cat /proc/meminfo | grep -E "(Cached|SReclaimable|Shmem)",若 Cached 占用超 70% 且 SReclaimable 很低,说明缓存全是不可回收页(如 tmpfs、shared memory),物理内存实际已紧张,但 free 显示还很宽裕
  • 留意 vm.swappiness 设为 0 时的副作用:虽然禁用了 swap,但一旦匿名页暴涨(如 Java 堆外、mmap),页面回收机制会更激进地回收 page cache,反而导致磁盘读写毛刺加剧,间接拖慢响应

为什么 dmesg 里没 OOM 日志,但服务还是假死

OOM Killer 只在物理内存 + swap 彻底耗尽时才触发,而假死常发生在“内存还有剩、CPU 还有空、但关键资源已枯竭”的灰色地带——比如所有可用文件描述符被占满、所有 inotify 实例用完、或者内核 slab 中 ext4_inode_cache 耗尽导致新建文件失败,此时进程会卡在 sys_open 等待,dmesg 不记录,strace -p $PID 却能看到它停在 openat 系统调用上。

  • 快速排查 fd 耗尽:ls /proc/$PID/fd | wc -l 对比 cat /proc/$PID/limits | grep "Max open files"
  • 查 inotify 限制:cat /proc/sys/fs/inotify/max_user_instances 和 cat /proc/$PID/status | grep -i inotify
  • 看 slab 是否异常:slabtop -o | head -15,重点关注 dentry、inode_cache、task_struct 的 use 列是否远超常态(比如 dentry use > 2M)
  • 注意:这些资源瓶颈不会触发 OOM Killer,也不会写入 /var/log/kern.log,但足以让 Spring Boot 的健康检查、配置刷新、甚至日志落盘全部 hang 住

最易被忽略的一点:假死经常是多个小瓶颈叠加的结果——比如线程池耗尽 + 连接池耗尽 + 文件描述符接近上限,每个单独看都不致命,合起来就让服务彻底失语。排查时不要满足于找到“一个原因”,要横向扫一遍资源水位,尤其关注那些不报错、不告警、但会悄悄堵死请求链路的内核资源项。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

417

2023.08.15

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

860

2023.09.08

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2552

2023.09.19

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

856

2023.10.09

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

769

2023.10.17

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

394

2023.10.17

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2316

2023.10.18

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

4272

2023.10.20

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

0

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
安装 Xdebug 并配置 phpstorm
安装 Xdebug 并配置 phpstorm

共1课时 | 178人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn