讲师中心 微信公众号
AI工具推荐 视频效率加速

K8s怎么排查Kube-Proxy出现IPVS模式转发失效

风明小哥_8879

风明小哥_8879

发布时间:2026-10-17 12:03:49

|

121人浏览过

|

来源于php中文网

原创

问题极可能出在kube-proxy的IPVS模式转发链路中断,需依次验证mode配置、内核模块加载、Endpoints一致性、IPVS连接状态,并通过日志定位parseIP错误或“no destination available”根因。

k8s怎么排查kube-proxy出现ipvs模式转发失效

当Kubernetes集群中Service流量突然不通、客户端访问ClusterIP超时或返回连接拒绝,而Pod本身健康且网络连通性正常时,问题极可能出在kube-proxy的IPVS模式转发链路中断。此时必须快速定位是规则未生成、后端缺失、内核模块异常,还是连接状态卡死。

确认kube-proxy是否真正运行在IPVS模式

进入任意工作节点(非master,避免干扰控制面),执行:
sudo kubectl get configmap kube-proxy -n kube-system -o yaml | grep mode
输出必须为 【mode: ipvs】;若显示iptables或为空,则配置未生效,后续所有IPVS排查均无意义。

检查当前运行中的kube-proxy容器实际参数:
kubectl get pod -n kube-system -l k8s-app=kube-proxy -o jsonpath='{.items[0].spec.containers[0].command}' | grep ipvs
应看到 --proxy-mode=ipvs 字样。若未出现,说明ConfigMap更新后未触发Pod滚动重启。

验证IPVS内核模块是否就绪

在出问题的节点上直接执行:
lsmod | grep -E '^(ip_vs|nf_conntrack)'
必须同时看到 ip_vs、ip_vs_rr(或ip_vs_wrr/ip_vs_sh)、nf_conntrack 三者加载。缺任一模块,IPVS无法建立真实服务器映射。

若缺失,立即加载:
sudo modprobe ip_vs ip_vs_rr nf_conntrack
并写入持久化配置防止重启失效:
echo -e "ip_vs\nip_vs_rr\nnf_conntrack" | sudo tee /etc/modules-load.d/ipvs.conf

【注意:仅加载ip_vs不等于IPVS可用,nf_conntrack缺失会导致连接跟踪失败,进而触发“no destination available”错误】

检查Endpoints与IPVS规则一致性

第一步:确认目标Service存在活跃Endpoint
kubectl get endpoints <service-name> -n <namespace>
输出中SUBSETS.ADDRESSES必须非空,且每个IP对应一个Running+Ready状态的Pod。

第二步:登录该Service流量必经的源节点(即发起调用的Pod所在节点),执行:
sudo ipvsadm -Ln | grep <ClusterIP>
例如查kubernetes默认Service:
sudo ipvsadm -Ln | grep 10.96.0.1
若无任何输出,说明kube-proxy根本未同步该Service规则——大概率是Endpoint为空或标签选择器不匹配。

K8s Security Review
K8s Security Review

分析 Kubernetes YAML 清单的安全错误配置、违背最佳实践及合规风险。

下载

第三步:若有规则但后端为空,查看具体条目:
sudo ipvsadm -Ln --stats | grep <ClusterIP>
若ActiveConn为0且InActConn持续增长,说明连接被创建但无法转发到后端,需立刻检查Pod就绪探针是否失败或网络策略是否拦截。

抓取IPVS连接状态诊断卡死连接

高频短连接场景下,IPVS连接表极易被TIME_WAIT和SYN_RECV填满,导致新连接无法建立。
执行:
sudo ipvsadm -lnc | head -20

重点关注以下三类异常状态:
① 大量 TCP 00:51 SYN_RECV:客户端发了SYN,但IPVS找不到后端或后端不可达,卡在此状态;
② 大量 TCP 01:30 TIME_WAIT:连接已关闭,但IPVS内核表仍锁定120秒以上,消耗哈希槽位;
③ 大量 TCP 00:00 ESTABLISHED 但 ActiveConn=0:连接已建好却无流量,通常是后端Pod监听端口错配或防火墙拦截回程包。

若发现SYN_RECV堆积,立即检查:
sudo ss -tnp | grep <ClusterIP>
确认是否有进程真正监听该VIP端口——正常情况下应无结果(VIP不绑定网卡),若有监听则说明有其他程序冲突。

强制刷新IPVS规则并观察日志

方法一:触发kube-proxy主动重载
kubectl delete pod -n kube-system -l k8s-app=kube-proxy
等待新Pod启动后,立刻在节点上执行:
sudo ipvsadm -Ln | grep <ClusterIP>
看规则是否重建、后端IP是否回归。

方法二:手动清理残留规则(仅限紧急恢复)
先备份当前规则:
sudo ipvsadm -Sn > /tmp/ipvs.rules.bak
再删除全部虚拟服务:
sudo ipvsadm -C
此时所有Service将立即不可用;等待约10秒,kube-proxy会自动重建全量规则。

方法三:实时盯住kube-proxy日志找报错源头:
kubectl logs -n kube-system -l k8s-app=kube-proxy --since=10s | grep -i -E "(error|fail|no destination|parseip)"
一旦出现 parseIP Error 或 no destination available,立即按IPv6双栈或版本兼容性方向深入。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

相关专题

更多
OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

0

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

0

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

0

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

0

2026.10.16

Revel框架入门与安装配置
Revel框架入门与安装配置

本专题从Revel框架环境搭建讲起,系统介绍命令行工具安装、项目创建、目录结构、配置文件及热代码重载,帮助开发者快速完成首个Go Web应用。

0

2026.10.16

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

20

2026.10.15

MySQL 忘记密码怎么办
MySQL 忘记密码怎么办

MySQL忘记密码专题汇集不同版本与系统下的root密码重置方法,覆盖MySQL 5.7、8.0、Mac、Linux及本地集成环境,并提示恢复权限与重新登录的检查步骤。

20

2026.10.15

Vue.js 中 ref 和 reactive 的区别
Vue.js 中 ref 和 reactive 的区别

Vue.js中ref和reactive的区别专题汇集两种响应式API的定义、访问方式、对象解构、侦听与性能取舍等文章,帮助结合实际状态类型选择合适写法。

0

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
光速学会docker容器
光速学会docker容器

共33课时 | 3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn