讲师中心 微信公众号
AI工具推荐 视频效率加速

Pod 被 OOMKilled 但 describe 里 memory request/limit 明明够用

星晨姑娘_9445

星晨姑娘_9445

发布时间:2026-01-17 22:19:02

|

735人浏览过

|

来源于php中文网

原创

Pod 被 OOMKilled 的根本原因是容器 RSS+cache 超出 cgroup v1 的 memory.limit_in_bytes,而非 heap 或 request/limit 数值超限;Java 等应用堆外内存易致 RSS 暴涨,需显式约束 JVM 参数并预留 10–25% 内存缓冲。

pod 被 oomkilled 但 describe 里 memory request/limit 明明够用

Pod 被 OOMKilled,但 kubectl describe pod 显示 memory request 和 limit 都没超——这其实非常常见,根本原因往往不是容器总内存超限,而是容器内进程的“RSS 内存”突破了 cgroup v1 的硬限制(即 limit),而 request/limit 数值本身只是调度和资源担保依据,并不等于实际内存使用边界是否被触发。

OOMKilled 真正看的是 RSS,不是 heap 或 container top 显示的“已用”

cgroup v1(Kubernetes 默认)对 memory.limit_in_bytes 的限制对象是 Resident Set Size(RSS)+ cache(如 page cache、tmpfs),但不包括 swap(默认禁用)、未映射的虚拟内存、或 JVM 堆外内存(如 DirectByteBuffer、native code 分配)。很多应用(尤其是 Java、Go、Node.js)会分配大量堆外内存或缓存,这部分 RSS 会悄无声息地涨上去,直到触达 limit。

  • 用 kubectl exec -it <pod> -- cat /sys/fs/cgroup/memory/memory.usage_in_bytes 查当前 RSS + cache 总用量
  • 对比 memory.limit_in_bytes(同目录下),若接近或超过,就是 OOMKilled 直接原因
  • top 或 ps aux --sort=-rss 只显示进程 RSS,但可能漏掉内核页缓存;cat /sys/fs/cgroup/memory/memory.stat 中的 total_rss 更准确

Java 应用特别容易“看似没超限,实则爆 RSS”

JVM 默认不把堆外内存(-XX:MaxDirectMemorySize)、CodeCache、Metaspace、线程栈、JIT 编译缓存等计入 -Xmx,但它们全算进容器 RSS。比如一个 -Xmx2g 的 Java 应用,在高并发下可能额外吃掉 1.5g RSS,最终 total_rss 达到 3.5g —— 若 limit 设为 3g,就会 OOMKilled。

wechat-article-extraction-mp-weixin-qq-com news-webpage-cleaning blog-post-parsing metadata-extraction-title-author-date multiple-output-formats-markdown-json-plain-text batch-processing-support
wechat-article-extraction-mp-weixin-qq-com news-webpage-cleaning blog-post-parsing metadata-extraction-title-author-date multiple-output-formats-markdown-json-plain-text batch-processing-support

基于三引擎设计,从微信文章、新闻和博客网页提取干净内容,支持标题作者日期元数据,多格式和批量处理。

下载
  • 加 JVM 参数显式约束:-XX:MaxDirectMemorySize=256m -XX:ReservedCodeCacheSize=256m -XX:CompressedClassSpaceSize=256m
  • 用 -XX:+UseContainerSupport(JDK 8u191+/10+)让 JVM 读取 cgroup limit 自动调堆(需配合 -XX:InitialRAMPercentage 等)
  • 避免用 spring-boot-devtools 或热加载类库上线,它们会导致 Metaspace 持续增长

limit 不等于“安全水位”,要预留 10–25% buffer

Kubernetes 的 memory limit 是 cgroup 硬上限,一旦 RSS 触顶,内核立即 OOM kill 主进程(PID 1)。没有预警、不可捕获、不走 graceful shutdown。即使应用自身监控显示“内存使用率 70%”,只要 RSS 瞬间冲到 100%,就挂。

  • 生产环境建议:limit ≥ request × 1.25,且绝对值比应用实测 peak RSS 高至少 300–500MiB
  • 用 metrics-server + kubectl top pods 观察历史 RSS 趋势,而非只看 request/limit 配置
  • 开启 memory.swap 不现实(K8s 默认禁用且不推荐),别指望靠 swap 救急

检查是否启用了 memory cgroup v2(少数新集群)

如果节点运行 cgroup v2(cat /proc/1/cgroup 显示 unified hierarchy),行为略有不同:OOM 逻辑更精细,但 memory.max 仍限制 total RSS,且 kubectl describe pod 不会自动展示 v2 指标。此时需直接进容器查 /sys/fs/cgroup/memory.max 和 /sys/fs/cgroup/memory.current。

  • v2 下 memory.stat 字段名变化(如 rss → memory.current),工具链兼容性需验证
  • 确认 kubelet 启动参数:--cgroup-driver=systemd 通常对应 v1,systemd + cgroupVersion=2 配置才启用 v2
  • 暂不建议在生产仓促切 v2,除非明确需要其 QoS 特性

热门AI工具

更多
Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

相关专题

更多
spring框架介绍
spring框架介绍

本专题整合了spring框架相关内容,想了解更多详细内容,请阅读专题下面的文章。

2451

2025.08.06

Java Spring Security 与认证授权
Java Spring Security 与认证授权

本专题系统讲解 Java Spring Security 框架在认证与授权中的应用,涵盖用户身份验证、权限控制、JWT与OAuth2实现、跨站请求伪造(CSRF)防护、会话管理与安全漏洞防范。通过实际项目案例,帮助学习者掌握如何 使用 Spring Security 实现高安全性认证与授权机制,提升 Web 应用的安全性与用户数据保护。

457

2026.01.26

sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

1138

2023.09.04

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

5387

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2368

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

5387

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2368

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3958

2023.08.10

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn