首页 web前端 js教程 了解 Node.js 集群:核心概念

了解 Node.js 集群:核心概念

Jan 15, 2025 am 07:31 AM

Understanding Node.js Cluster: The Core Concepts

前言

如果您使用 PM2 来管理 Node.js 进程,您可能已经注意到它支持集群模式。这种模式允许 Node.js 创建多个进程。当您将集群模式下的实例数量设置为 max 时,PM2 会自动创建与服务器上可用 CPU 核心相对应的 Node 进程数。

PM2 通过利用 Node.js 的 Cluster 模块来实现这一点。该模块解决了 Node.js 的单线程特性,该特性传统上限制了其利用多个 CPU 核心的能力。但是 Cluster 模块内部是如何工作的呢?进程之间如何通信?多个进程如何监听同一个端口? Node.js 如何将请求分发到这些进程?如果您对这些问题感到好奇,请继续阅读。

核心原则

Node.js 工作进程是使用 child_process.fork() 方法创建的。这意味着有一个父进程和多个子进程。代码通常如下所示:

const cluster = require('cluster');
const os = require('os');

if (cluster.isMaster) {
  for (let i = 0, n = os.cpus().length; i < n; i++) {
    cluster.fork();
  }
} else {
  // Start the application
}
登录后复制
登录后复制

如果您研究过操作系统,您可能熟悉 fork() 系统调用。调用进程是父进程,而新创建的进程是子进程。这些子进程与父进程共享相同的数据段和堆栈,但它们的物理内存空间不一定共享。在 Node.js 集群中,master 进程侦听端口并将传入请求分发到 worker 进程。这涉及到解决三个核心主题:进程间通信 (IPC)负载平衡策略多进程端口监听

进程间通信(IPC)

master进程使用process.fork()创建子进程。这些进程之间的通信是通过 IPC 通道 处理的。操作系统提供了多种进程间通信的机制,例如:

  1. 共享内存 多个进程共享一个内存空间,通常通过信号量进行管理以实现同步和互斥。
  2. 消息传递

    通过发送和接收消息来处理交换数据。

  3. 信号量

    信号量是系统分配的状态值。缺乏控制的进程将被迫在特定的检查点停止,等待继续进行的信号。当仅限于二进制值(0 或 1)时,此机制称为“互斥锁”(互斥锁)。

  4. 管道

    管道连接两个进程,允许一个进程的输出作为另一个进程的输入。这可以使用管道系统调用来创建。 | 的 | shell 脚本中的命令是这种机制的一个常见示例。

Node.js 使用基于事件的机制在父进程和子进程之间进行通信。这是父进程向子进程发送 TCP 服务器句柄的示例:

const cluster = require('cluster');
const os = require('os');

if (cluster.isMaster) {
  for (let i = 0, n = os.cpus().length; i < n; i++) {
    cluster.fork();
  }
} else {
  // Start the application
}
登录后复制
登录后复制

负载均衡策略

如前所述,所有请求均由 master 进程分发。确保服务器负载在工作进程之间均匀分布需要负载平衡策略。 Node.js 默认使用 round-robin 算法。

循环赛

轮询方法是 Nginx 也采用的常见负载均衡算法。它的工作原理是按顺序将传入请求分发到每个进程,从第一个进程开始,到达最后一个进程后循环返回。然而,该方法假设所有进程的处理能力相同。在请求处理时间变化较大的场景下,可能会出现负载不平衡的情况。

为了解决这个问题,Nginx 经常使用加权循环(WRR),其中服务器被分配不同的权重。选择权重最高的服务器,直到其权重减少到零,此时根据新的权重序列重新开始循环。

您可以通过设置 NODE_CLUSTER_SCHED_POLICY 环境变量或通过 cluster.setupMaster(options) 配置来调整 Node.js 中的负载均衡策略。结合 Nginx 进行多机集群和 Node.js Cluster 进行单机多进程平衡是一种常见的做法。

多进程端口监听

在 Node.js 的早期版本中,侦听同一端口的多个进程会竞争传入连接,从而导致负载分布不均匀。后来通过循环赛策略解决了这个问题。当前方法的工作原理如下:

  1. master 进程创建一个套接字,将其绑定到一个地址,并开始监听。
  2. 套接字的文件描述符(fd)不会传递给工作进程。
  3. 当主进程接受新连接时,它会确定哪个工作进程应该处理该连接并相应地转发它。

本质上,主进程监听端口并使用定义的策略(例如,循环)将连接分配给工作进程。这种设计消除了worker之间的竞争,但要求master进程高度稳定。

结论

本文以 PM2 的 Cluster 模式为切入点,探讨了 Node.js 的 Cluster 模块实现多进程应用程序背后的核心原理。我们重点关注三个关键方面:进程间通信、负载均衡和多进程端口监听。

通过研究Cluster模块,我们可以看到很多基本原理和算法是通用的。例如,循环算法被用于操作系统进程调度和服务器负载平衡。 master-worker架构类似于Nginx中的多进程设计。同样,信号量和管道等机制在各种编程范例中也无处不在。

虽然新技术不断涌现,但它们的基础始终如一。了解这些核心概念使我们能够自信地推断和适应新的挑战。


我们是 Leapcell,是将 Node.js 项目部署到云端的首选。

Understanding Node.js Cluster: The Core Concepts

Leapcell 是用于 Web 托管、异步任务和 Redis 的下一代无服务器平台:

多语言支持

  • 使用 Node.js、Python、Go 或 Rust 进行开发。

免费部署无限个项目

  • 只需支付使用费用——无请求,不收费。

无与伦比的成本效率

  • 即用即付,无闲置费用。
  • 示例:25 美元支持 694 万个请求,平均响应时间为 60 毫秒。

简化的开发者体验

  • 直观的用户界面,轻松设置。
  • 完全自动化的 CI/CD 管道和 GitOps 集成。
  • 实时指标和日志记录以获取可行的见解。

轻松的可扩展性和高性能

  • 自动扩展,轻松处理高并发。
  • 零运营开销——只需专注于构建。

在文档中探索更多信息!

Understanding Node.js Cluster: The Core Concepts

在 X 上关注我们:@LeapcellHQ


阅读我们的博客

以上是了解 Node.js 集群:核心概念的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

Video Face Swap

Video Face Swap

使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

<🎜>:泡泡胶模拟器无穷大 - 如何获取和使用皇家钥匙
3 周前 By 尊渡假赌尊渡假赌尊渡假赌
北端:融合系统,解释
4 周前 By 尊渡假赌尊渡假赌尊渡假赌
Mandragora:巫婆树的耳语 - 如何解锁抓钩
3 周前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

热门话题

Java教程
1670
14
CakePHP 教程
1428
52
Laravel 教程
1329
25
PHP教程
1274
29
C# 教程
1256
24
Python vs. JavaScript:学习曲线和易用性 Python vs. JavaScript:学习曲线和易用性 Apr 16, 2025 am 12:12 AM

Python更适合初学者,学习曲线平缓,语法简洁;JavaScript适合前端开发,学习曲线较陡,语法灵活。1.Python语法直观,适用于数据科学和后端开发。2.JavaScript灵活,广泛用于前端和服务器端编程。

从C/C到JavaScript:所有工作方式 从C/C到JavaScript:所有工作方式 Apr 14, 2025 am 12:05 AM

从C/C 转向JavaScript需要适应动态类型、垃圾回收和异步编程等特点。1)C/C 是静态类型语言,需手动管理内存,而JavaScript是动态类型,垃圾回收自动处理。2)C/C 需编译成机器码,JavaScript则为解释型语言。3)JavaScript引入闭包、原型链和Promise等概念,增强了灵活性和异步编程能力。

JavaScript和Web:核心功能和用例 JavaScript和Web:核心功能和用例 Apr 18, 2025 am 12:19 AM

JavaScript在Web开发中的主要用途包括客户端交互、表单验证和异步通信。1)通过DOM操作实现动态内容更新和用户交互;2)在用户提交数据前进行客户端验证,提高用户体验;3)通过AJAX技术实现与服务器的无刷新通信。

JavaScript在行动中:现实世界中的示例和项目 JavaScript在行动中:现实世界中的示例和项目 Apr 19, 2025 am 12:13 AM

JavaScript在现实世界中的应用包括前端和后端开发。1)通过构建TODO列表应用展示前端应用,涉及DOM操作和事件处理。2)通过Node.js和Express构建RESTfulAPI展示后端应用。

了解JavaScript引擎:实施详细信息 了解JavaScript引擎:实施详细信息 Apr 17, 2025 am 12:05 AM

理解JavaScript引擎内部工作原理对开发者重要,因为它能帮助编写更高效的代码并理解性能瓶颈和优化策略。1)引擎的工作流程包括解析、编译和执行三个阶段;2)执行过程中,引擎会进行动态优化,如内联缓存和隐藏类;3)最佳实践包括避免全局变量、优化循环、使用const和let,以及避免过度使用闭包。

Python vs. JavaScript:社区,图书馆和资源 Python vs. JavaScript:社区,图书馆和资源 Apr 15, 2025 am 12:16 AM

Python和JavaScript在社区、库和资源方面的对比各有优劣。1)Python社区友好,适合初学者,但前端开发资源不如JavaScript丰富。2)Python在数据科学和机器学习库方面强大,JavaScript则在前端开发库和框架上更胜一筹。3)两者的学习资源都丰富,但Python适合从官方文档开始,JavaScript则以MDNWebDocs为佳。选择应基于项目需求和个人兴趣。

Python vs. JavaScript:开发环境和工具 Python vs. JavaScript:开发环境和工具 Apr 26, 2025 am 12:09 AM

Python和JavaScript在开发环境上的选择都很重要。1)Python的开发环境包括PyCharm、JupyterNotebook和Anaconda,适合数据科学和快速原型开发。2)JavaScript的开发环境包括Node.js、VSCode和Webpack,适用于前端和后端开发。根据项目需求选择合适的工具可以提高开发效率和项目成功率。

C/C在JavaScript口译员和编译器中的作用 C/C在JavaScript口译员和编译器中的作用 Apr 20, 2025 am 12:01 AM

C和C 在JavaScript引擎中扮演了至关重要的角色,主要用于实现解释器和JIT编译器。 1)C 用于解析JavaScript源码并生成抽象语法树。 2)C 负责生成和执行字节码。 3)C 实现JIT编译器,在运行时优化和编译热点代码,显着提高JavaScript的执行效率。

See all articles