讲师中心 微信公众号
AI工具推荐 视频效率加速

K3s 节点内存压力大导致 eviction 但 free -h 看到大量 available

星晨姑娘_9445

星晨姑娘_9445

发布时间:2026-01-17 22:42:57

|

611人浏览过

|

来源于php中文网

原创

K3s中Pod被OOMKilled或驱逐的主因是kubelet依据cgroup内存统计和node allocatable判断压力,而非free -h显示的系统available内存;需通过cgroup指标、/proc/meminfo及kubectl describe nodes定位真实内存瓶颈。

k3s 节点内存压力大导致 eviction 但 free -h 看到大量 available

这是 K3s 环境中非常典型的“内存看似充足,但 Pod 却被 OOMKilled 或触发 kubelet eviction”的现象。根本原因不是 free -h 显示的 available 值高就代表内核能随时分配内存——Kubernetes(包括 K3s)的驱逐逻辑依赖的是 cgroup 内存统计 + kubelet 的 node allocatable 计算,而非用户态看到的 free 内存。

为什么 free -h 的 available 很高,但 kubelet 还是触发 eviction?

K3s 默认使用 cgroup v2 + systemd 驱动,而 free -h 统计的是整个系统的 page cache、slab、buffers 等可回收内存总量,它不反映:

  • cgroup 内存限制已逼近上限:Pod 所在的 cgroup(如 /kubepods.slice)可能已用尽其配额(即使系统整体还有空闲页),kubelet 通过 cgroup.memory.stat 中的 working_set 和 memory.usage_in_bytes 判断压力;
  • kubelet 的 memory.available 阈值基于 node allocatable:它从 /proc/meminfo 中读取 MemAvailable,再减去 system-reserved + kube-reserved,这个值往往远小于 free -h 显示的 available;
  • page cache 滞后回收:Linux 不会立刻释放大量 page cache,而 kubelet 的 eviction manager 每 10s 检查一次,若此时 cgroup usage 已超限或 memory.available 低于阈值(默认 100Mi),就会触发 soft/hard eviction。

快速定位真实内存压力来源

别只看 free -h,执行以下命令:

用于自动切换项目中适合的node 版本
用于自动切换项目中适合的node 版本

根据 package.json 中的 engines 字段自动检测 Node.js 版本需求,未安装 nvm 时自动安装并切换至对应版本。支持 Windows、macOS、Linux。适用于 Node.js 项目开发、版本切换和环境配置。

下载
  • kubectl describe nodes → 查看 Conditions 是否有 MemoryPressure,以及 Allocatable 和 Capacity 的差异;
  • cat /var/lib/rancher/k3s/agent/etc/containerd/config.toml | grep -A5 "systemd_cgroup" → 确认是否启用 cgroup v2;
  • cat /sys/fs/cgroup/memory.max(cgroup v2)或 cat /sys/fs/cgroup/memory/kubepods/memory.limit_in_bytes(v1)→ 查看 kubepods cgroup 实际内存上限;
  • cat /sys/fs/cgroup/memory/kubepods/memory.current → 当前已用内存(单位 bytes),对比上面的 max;
  • grep -i "memavailable\|memfree" /proc/meminfo → 获取 kubelet 实际参考的 MemAvailable 值。

关键配置与调优建议

K3s 默认未显式设置资源预留,容易导致 kubelet 误判。需手动干预:

  • 为 kubelet 设置合理的 memory-reserved:启动 K3s 时加参数 --kubelet-arg="system-reserved=memory=512Mi" --kubelet-arg="kube-reserved=memory=512Mi",避免 kubelet 把系统进程和自身内存算进可分配池;
  • 降低 eviction-hard 阈值(谨慎):例如 --kubelet-arg="eviction-hard=memory.available,让驱逐更早发生,避免突发 OOM;
  • 检查容器是否未设 memory limits:无 limit 的 Pod 可无限增长,抢占所有 cgroup 配额。用 kubectl get pods --all-namespaces -o wide --sort-by=.status.phase | grep -v Running 找出异常终止的 Pod,并检查其 spec.resources.limits;
  • 禁用 swap(K3s 要求):确保 swapoff -a 且 /etc/fstab 中注释 swap 行,否则 kubelet 无法准确评估内存压力。

验证与监控建议

重启 K3s 后,持续观察:

  • kubectl top nodes 和 kubectl top pods -A → 看实际 RSS 使用趋势;
  • sudo crictl stats --no-trunc → 查看每个容器的实时 cgroup memory usage;
  • 部署 metrics-server(K3s 默认不带,需手动安装)以支持 HPA 和更准的资源视图;
  • 用 node_exporter + Prometheus 监控 node_memory_MemAvailable_bytes 和 container_memory_working_set_bytes{container!="",namespace=~"default|kube-system"}。

问题本质是“可用内存”在不同层级有不同定义。K3s 的轻量不等于配置可省略——尤其在资源受限节点上,必须显式预留、设限、监控 cgroup 视角的真实用量。

热门AI工具

更多
Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

相关专题

更多
sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

1138

2023.09.04

default gateway怎么配置
default gateway怎么配置

配置default gateway的步骤:1、了解网络环境;2、获取路由器IP地址;3、登录路由器管理界面;4、找到并配置WAN口设置;5、配置默认网关;6、保存设置并退出;7、检查网络连接是否正常。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

357

2023.12.07

Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务

Golang云原生微服务Kubernetes (K8s) 是指 使用 Go 语言(Golang)编写的云原生微服务,并利用 Kubernetes 平台进行容器化部署、自动化管理、弹性伸缩和高效编排的一整套现代应用架构方案。

116

2025.12.22

Go云原生应用与Kubernetes服务部署实战
Go云原生应用与Kubernetes服务部署实战

本专题围绕 Go 语言在云原生环境中的应用展开,讲解容器化部署、Kubernetes 编排、服务发现、健康检查与弹性扩缩容机制。通过真实云端案例,帮助开发者构建可扩展的云原生微服务架构。

208

2026.06.29

磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4290

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3613

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2873

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

7050

2023.07.05

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

40

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn