讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么排查高频短连接服务引发的大量TIME_WAIT回收失败

夜宇君_6408

夜宇君_6408

发布时间:2026-11-03 12:55:26

|

925人浏览过

|

来源于php中文网

原创

TIME_WAIT回收失败表现为新建连接报错且内核日志出现“time wait bucket table overflow”,需同步分析ss -s与dmesg,确认是否真因桶溢出导致静默丢包,而非单纯数量多。

linux怎么排查高频短连接服务引发的大量time_wait回收失败

TIME_WAIT 回收失败不是内核“卡住”,而是端口耗尽或桶溢出导致新连接被静默丢弃;排查必须从 ss -s 和 dmesg 同步入手,不能只看数量。

确认是否真发生了回收失败,而非单纯数量多

大量 TIME_WAIT 本身不等于故障。真正失败的表现是新建连接报错,且与内核资源告警同步出现:

  • 执行 ss -s,重点看 timewait 行数字是否接近或超过 ip_local_port_range 差值(如 cat /proc/sys/net/ipv4/ip_local_port_range 输出 32768 60999 → 约 28232 个可用端口)
  • 立刻查内核日志:dmesg | grep "time wait bucket" 或 grep "TCP: time wait bucket table overflow" /var/log/kern.log。出现该日志,说明内核已开始强制销毁新关闭的连接,直接发 RST,这就是回收失败的铁证
  • 检查应用错误日志是否在相同时间点密集出现 connect: cannot assign requested address 或 Connection reset by peer

定位短连接源头:用 ss 追 IP+端口组合

高频短连接必然体现在客户端 IP 和目标服务端口的高度集中。用以下命令快速聚焦:

Linux Security Scanner
Linux Security Scanner

Linux 安全审计工具,检查 SSH 配置、开放/监听端口、防火墙规则(ufw/iptables/nftables)、失败登录尝试、sudoers 权限...

下载
  • ss -tan state time-wait | awk '{print $5}' | cut -d: -f1 | sort | uniq -c | sort -nr | head -10 → 查看哪些远端 IP 占了最多 TIME_WAIT
  • ss -tan state time-wait | awk '{print $5}' | cut -d: -f2 | sort | uniq -c | sort -nr | head -5 → 查看连向哪些目标端口最频繁(如全是 :8080,大概率是后端 HTTP 调用)
  • 若结果集中在少数几个内网 IP(如 10.3.2.67),问题就在调用方代码或代理配置;若分散但量大,可能是爬虫、监控探针或未节流的 SDK 调用

验证 tcp_tw_reuse 是否真正生效

很多人开了 net.ipv4.tcp_tw_reuse = 1 却没效果,根本原因是依赖条件不满足:

  • 必须同时启用 net.ipv4.tcp_timestamps = 1(现代内核默认开,但旧配置可能关;务必显式写入 /etc/sysctl.conf 并 sysctl -p)
  • tcp_tw_reuse 只对 outbound 连接有效 —— 即本机作为客户端发起的连接;服务端监听侧的 TIME_WAIT 不走这条路
  • 它只复用“空闲超 1 秒”的 TIME_WAIT socket,且要求时间戳严格递增;NAT 环境下若客户端时间不同步或复用过快,仍可能被拒绝
  • 验证方式:压测中持续运行 ss -tan state time-wait | wc -l,开启前后对比是否稳定在 ip_local_port_range 的 30% 以内(如从 25000 降到 6000)

绕过回收失败的临时兜底操作

当线上已触发 bucket overflow,参数调整来不及生效时,可快速缓解:

  • 临时扩大桶上限(治标):sysctl -w net.ipv4.tcp_max_tw_buckets=200000,避免内核静默丢包
  • 立即释放部分端口(仅限紧急):ss -ant state time-wait | head -1000 | awk '{print $4}' | xargs -I{} sh -c 'echo {} | cut -d: -f2 | xargs -I{} ss -K dst :{}'(慎用,ss -K 会强制 kill 连接,仅用于已确认无业务影响的测试环境)
  • 更安全的做法是切流:让部分流量走另一台未满载的实例,给当前节点喘息窗口

真正难的不是改参数,而是区分清楚:这个 TIME_WAIT 是你主动发起的(客户端行为),还是别人连你产生的(服务端行为)。前者靠 tcp_tw_reuse + 连接池解决,后者得靠让对方 Keep-Alive 或把关闭动作交还给调用方 —— 混淆这两者,所有优化都会打偏。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4370

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3673

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2933

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

7250

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

6902

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3933

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

3425

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

3679

2023.07.25

Tailwind CSS 如何制作导航栏和卡片
Tailwind CSS 如何制作导航栏和卡片

用 Tailwind CSS 制作导航栏和卡片,可先搭建语义化结构,再组合 Flex、Grid、间距、圆角与阴影类。这里整理横向导航、移动端菜单、卡片网格及悬停效果的相关文章,帮助你把常见页面组件做得清晰且适配不同屏幕。

0

2026.11.03

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 0.1万人学习

SQL优化与排查(MySQL版)
SQL优化与排查(MySQL版)

共26课时 | 3.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn