排查TCP重传应先分层验证:先用ethtool和/proc/net/dev查物理与驱动层silent丢包(如rx_over_errors升为Ring Buffer溢出,rx_dropped升为内核拷贝失败),再用tc qdisc检查人为丢包,接着用netstat -s和ss -i定位协议栈丢包层,最后针对性tcpdump抓包确认。

排查 Linux 中因丢包或错包导致的 TCP 重传,关键不是一上来就抓包,而是按协议栈从下往上分层验证:先确认物理和驱动层有没有 silently 丢包,再查内核协议栈是否主动丢弃,最后看应用层是否接收不及。重传本身是 TCP 的容错机制,真正要揪出来的是“为什么需要重传”。
看网卡硬件与驱动是否在底层丢包
很多重传根本没进协议栈,tcpdump 抓不到,但 ethtool 和 /proc/net/dev 会留下痕迹:
- ethtool eth0 看 Link、Speed、Duplex 是否正常;重点盯 rx_errors / rx_dropped / rx_over_errors
- rx_over_errors 持续上涨 → Ring Buffer 溢出,通常是 CPU 处理不过来(比如软中断堆积、vCPU 过载)
- rx_dropped 上涨 → 内核拷贝数据到内存时失败,常见于内存紧张或 NAPI 调度延迟
- cat /proc/net/dev 查 RX-DRP(已入 Ring Buffer 后丢)、RX-OVR(Ring Buffer 溢出直接丢)
- 虚拟网卡还要看 rx_missed_errors,升得快说明 vCPU 调度跟不上收包节奏
查 tc/qdisc 是否人为制造丢包
这是最容易被忽略的“伪重传”来源——你看到重传,其实是自己配的限流规则在丢包:
Zynq‑7000 / Zynq UltraScale+ 硬件调试技能。适用于 Xilinx Zynq(Cortex‑A9/A53 + FPGA)Linux 环境,调试 I2C、I2S、UART、GPIO 等外设。包括设备树配置、内核驱动、用户空间调试工具、交叉编译和常见问题排查,支持 PetaLinux 开发。
- tc qdisc show dev eth0 查有没有 netem、fq_codel、prio 等带 loss、corrupt、delay 的规则
- tc -s qdisc show dev eth0 带 -s 才能看到真实丢包计数,如 (dropped 127)
- 常见误配:
tc qdisc add dev eth0 root netem loss 5%→ 所有出向包无差别丢 5%,且不体现在 /proc/net/dev 里 - 删掉用:
tc qdisc del dev eth0 root(注意容器网络可能在 host interface 上挂了规则)
定位协议栈哪一层在丢或错包
netstat -s 和 ss -i 是核心诊断工具,能区分丢包发生在哪一层:
-
netstat -s | grep -A 5 -B 5 "retransmit\|drop\|error" 关注这几项:
• TCP retransmits:真实重传次数
• TCPSynRetrans:SYN 重发,常指向 syn backlog 满或防火墙拦截
• IPReversePathFilter:反向路径过滤丢包(rp_filter 开启且路由不对)
• UdpInErrors / UdpNoPorts:UDP 层错包或端口未监听 - ss -i 看单个连接的 rto、retrans、qsize,rto 飙高 + retrans 涨 → 很可能链路或对端处理慢
-
cat /proc/net/snmp 里的 TcpExt 表项:
• SyncookiesSent > 0 → syn queue 满,触发 syncookie(说明 somaxconn 或 tcp_max_syn_backlog 不足)
• ListenOverflows > 0 → accept queue 满,应用调用 accept() 太慢
抓包确认丢包位置与类型
tcpdump 要选对位置,否则白忙活:
- tcpdump -i eth0 -n 'port 8080':若连 SYN 都没收到 → 问题在物理链路、交换机、防火墙或网卡驱动
- tcpdump -i lo -n 'port 8080':若 eth0 有包、lo 没包 → 问题在 IP 层(如 iptables DROP、rp_filter、路由错误)
- tcpdump -i any -n 'port 8080 and tcp[tcpflags] & (tcp-syn|tcp-ack) == tcp-syn':专抓 SYN,看是否被对端 reset 或超时重发
- 注意关掉网卡 offload:
ethtool -K eth0 gso off tso off gro off,避免抓包看到“假重传”

















