讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux 怎么排查系统因文件描述符耗尽抛出的拒绝服务日志

浅枫酱_2290

浅枫酱_2290

发布时间:2026-08-28 10:02:25

|

289人浏览过

|

来源于php中文网

原创

确认是文件描述符(FD)耗尽:日志中出现“Too many open files”“EMFILE”等提示,或连接静默丢弃、HTTP 500无堆栈、Nginx 502无上游错误等伪装现象;结合cat /proc/sys/fs/file-nr和lsof -p PID验证用量与占用分布,区分配置不足与真实泄漏。

linux 怎么排查系统因文件描述符耗尽抛出的拒绝服务日志

直接看日志里有没有 “Too many open files”、“EMFILE” 或 “open failed (24: Too many open files)” 这类明确提示,基本就能确认是文件描述符(FD)耗尽导致的拒绝服务。重点不是找“错误”,而是找“失败但没报错”的现象——比如连接被静默丢弃、HTTP 500 响应里没有堆栈、Nginx 返回 502 却查不到 upstream 错误,这些往往是 FD 耗尽的典型伪装。

查日志时盯紧这三类线索

别只 grep “error”,要结合上下文和时间线交叉验证:

  • 服务日志中的“打开失败”类语句:比如 Nginx 报 open("/var/log/nginx/access.log") failed (24: Too many open files);Java 应用抛 java.io.IOException: Too many open files;MySQL 出现 Can't create thread (Errno: 11)(其实是创建 socket 失败)
  • systemd 服务状态异常:运行 systemctl status your-service,如果看到 Active: failed 或 Exited with code=exited, status=1/FAILURE,再配合 journalctl -u your-service --since "1 hour ago" 查最近日志,往往在崩溃前几秒就有 FD 相关报错
  • 内核或系统级提示:执行 dmesg -T | grep -i "file descriptor\|EMFILE",有时内核会在资源紧张时打 warning;journalctl -k --since "1 day ago" | grep -i "limit" 也能发现隐性告警

快速定位哪个进程在吃光 FD

光看日志不够,得马上确认是不是真耗尽、谁在占用:

CMIC Skill Scanner (Linux ARM64)
CMIC Skill Scanner (Linux ARM64)

使用 auto、native 或 external 引擎审计待安装的 skill 包或归档,并可选启用 LLM 语义分析。

下载
  • 查系统总用量:cat /proc/sys/fs/file-nr —— 第二列是当前已用 FD 数,接近第三列(file-max)就危险
  • 查单个服务用了多少:ls /proc/$(pgrep -f "your-service-name")/fd/ 2>/dev/null | wc -l
  • 全系统按 FD 数排序找出“大户”:lsof -n | awk '{print $2}' | sort | uniq -c | sort -nr | head -5
  • 对高嫌疑 PID,看它开了啥:lsof -p PID | awk '$5 ~ /^(REG|IPv4|IPv6|pipe|anon_inode)$/ {print $5,$9}' | sort | uniq -c | sort -nr | head -10,重点关注大量 socket、eventpoll 或未关闭的日志文件

区分是配置不足还是真的泄漏

调大限制能临时缓解,但掩盖问题只会让故障延迟爆发:

  • 如果 lsof -p PID 显示大量 CLOSE_WAIT socket 或重复路径的日志文件(如 /var/log/app.log.1、/var/log/app.log.2…),大概率是应用没关闭流或轮转逻辑有缺陷
  • 如果 FD 类型高度集中(比如全是 IPv4),且连接数随请求量线性增长、不回落,说明连接没复用或没设超时,不是泄漏,是配置不合理
  • Java 应用注意 FileInputStream、Socket、OkHttpClient response body 是否都 close;Go 注意 defer 是否覆盖所有 return 分支;Nginx 检查 worker_connections 和 worker_rlimit_nofile 是否匹配

调参后必须验证是否生效

改了配置不等于进程真拿到了新限制:

  • 用户级 limits 修改后,得重新登录或新开 shell 才生效;systemd 服务必须加 LimitNOFILE=65536 到 service 文件里,并执行 systemctl daemon-reload && systemctl restart your-service
  • 重启后立刻验证:cat /proc/$(pgrep -f "your-service")/limits | grep "Max open files",确保软硬限制值已更新
  • 同时跑 ls /proc/PID/fd/ | wc -l 对比重启前后数值,确认实际使用量是否可控、是否持续缓慢上涨

热门AI工具

更多
UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

417

2023.08.15

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

860

2023.09.08

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2552

2023.09.19

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

856

2023.10.09

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

769

2023.10.17

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

394

2023.10.17

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2316

2023.10.18

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

4252

2023.10.20

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

0

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn