讲师中心 微信公众号
AI工具推荐 视频效率加速

Nginx 最少连接算法提高后端集群的响应敏捷性

酷辰吖_8536

酷辰吖_8536

发布时间:2026-07-14 06:11:19

|

674人浏览过

|

来源于php中文网

原创

least_conn算法通过将新请求优先分发给当前活跃连接数最少的健康后端,有效规避长任务占用节点导致的隐性排队;需配套健康检查、keepalive复用及后端连接池支持才能生效。

nginx 最少连接算法提高后端集群的响应敏捷性

最少连接算法(least_conn)能提升后端集群响应敏捷性,关键不在于“选空闲机器”,而在于它让新请求绕开正被长任务占用的节点——比如一个还在处理 8 秒报表的后端,哪怕它 CPU 没跑满,least_conn 也会自然跳过,把请求导向刚完成上个请求、连接数为 0 的节点。这种调度逻辑对计算密集、耗时波动大的服务特别有效。

它真正解决的是“隐性排队”问题

轮询策略按顺序派发,不管后端手头有没有活儿。结果就是:A 节点正在跑三个 6 秒的模型推理,连接数已堆到 15;B、C 节点空闲,却因轮到 A 还得继续塞请求过去。用户端表现为部分请求延迟陡增、超时增多,监控里看到连接数失衡但 CPU 平稳——least_conn 直接盯住这个“已建立未关闭”的连接数,相当于实时读取每台机器的“待办清单长度”,从而避开拥堵点。

Nginx Config Linter
Nginx Config Linter

对 Nginx 配置文件进行语法检查、验证和安全、性能审计。

下载

必须配齐三样东西,算法才真正起效

  • 健康检查不能缺:least_conn 自身不判断节点是否存活。一台后端进程卡死但 TCP 连接没断,它的连接数可能仍显示为 0,Nginx 就会持续转发。需搭配主动健康检查(如 health_check interval=3 fails=2 passes=2)或至少启用被动探测(proxy_next_upstream error timeout http_500 http_502 + max_fails=2 fail_timeout=15s)
  • keepalive 要对齐配置:只写 keepalive 32 不够。必须同时设置 proxy_http_version 1.1 和 proxy_set_header Connection '',否则后端收不到复用信号,连接建了就关,活跃连接数始终≈请求数,least_conn 就退化成伪随机
  • 后端要配合连接池:Tomcat 需开启 maxKeepAliveRequests > 0,Spring Boot 应配置 server.tomcat.connection-timeout 大于 Nginx 的 keepalive_timeout,避免 Nginx 想复用,后端已主动断连

连接数相等时,weight 才真正起作用

当两台后端当前活跃连接数都是 5,least_conn 不会随便挑一个,而是退回到加权轮询逻辑:weight 值高的节点被选中的概率更高。这意味着你可以用 weight 反映硬件差异(如 16 核机器设 weight=2,8 核设 weight=1),而不必强依赖 max_conns。不过若想做软性容量控制,max_conns 更直接——比如给高配节点设 max_conns=2000,普通节点限 800,超过即跳过,不参与 least_conn 比较。

验证是否真起效,看这三项指标

  • 压测中各后端的 active connections(通过 stub_status 或 Prometheus)是否基本均衡,而非某台长期高于均值 30% 以上
  • 日志中 $upstream_addr 字段是否随负载变化动态分布,而不是固定打到某台
  • 对比 $upstream_connect_time 和 $upstream_header_time:前者稳定但后者飙升,说明瓶颈在业务逻辑;两者同步升高,可能是 Nginx worker_connections 不足或网络抖动

热门AI工具

更多
Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2183

2023.08.11

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

5830

2024.03.19

后端的主要工作内容介绍
后端的主要工作内容介绍

后端是应用程序的服务端部分,负责核心任务,如数据库交互、业务逻辑处理和响应客户端请求。想了解更多后端的相关内容,可以阅读本专题下面的文章。

5126

2024.03.19

nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

383

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3147

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

5765

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

541

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1456

2024.07.09

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

0

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn