讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 Reactor 中真正并行执行 Flux 的 map 操作

轻磊小哥_6281

轻磊小哥_6281

发布时间:2026-09-30 09:45:45

|

498人浏览过

|

来源于php中文网

原创

如何在 Reactor 中真正并行执行 Flux 的 map 操作

当使用 buffer() 分批数据后,需通过 parallel() + runOn() 而非 publishOn() 实现真正的多线程并行处理;否则 map 仍串行运行于单一线程。

当使用 `buffer()` 分批数据后,需通过 `parallel()` + `runon()` 而非 `publishon()` 实现真正的多线程并行处理;否则 `map` 仍串行运行于单一线程。

在 Project Reactor 中,Flux 默认是顺序、单线程流水线式执行的。即使你调用 .publishOn(Schedulers.parallel()),它仅影响下游操作符的调度上下文(即后续 doOnNext、flatMap 等在指定线程执行),但 map 本身仍由上游 Publisher 在当前线程逐个触发——尤其当上游是冷流(如 Flux.just)且数据瞬间就绪时,buffer(2) 生成的 List<string></string> 会一次性全部发出,随后 map 在同一个线程上连续执行,无法并发。

✅ 正确做法是启用 并行化处理模型:
使用 .parallel() 将 Flux<list>></list> 转换为 ParallelFlux(逻辑分片),再通过 .runOn(Schedulers.parallel()) 为每个分片分配独立线程执行 map,最后用 .sequential() 合并结果为有序 Flux:

@Test
public void testParallelMapOnBufferedFlux() throws InterruptedException {
    Flux.just("a", "b", "c", "d", "e", "f", "g")
        .buffer(2)
        .parallel()                    // ✅ 启用并行处理(默认并行度 = CPU 核心数)
        .runOn(Schedulers.parallel())  // ✅ 每个分片在独立 parallel 线程中执行
        .map(this::doTimeintensiveStuff)
        .sequential()                  // ✅ 恢复为普通 Flux(保持原始顺序)
        .doOnNext(val -> {
            log.info("[" + Thread.currentThread().getName() + "]  " + val);
        })
        .blockLast();
}

private String doTimeintensiveStuff(List<String> input) {
    try {
        TimeUnit.MILLISECONDS.sleep(100); // 模拟耗时操作
    } catch (InterruptedException e) {
        Thread.currentThread().interrupt();
    }
    return String.join(", ", input);
}

? 关键区别说明:

Orderly Sdk React Hooks
Orderly Sdk React Hooks

Orderly React SDK 钩子使用参考指南,包括 useOrderEntry、usePositionStream、useOrderbookStream、useCollateral 等。

下载
  • publishOn(scheduler):切换订阅者线程,仅改变后续操作符的执行线程,不改变执行模型(仍是串行 pull);
  • parallel() + runOn(scheduler):显式启用并行流水线,将数据分片并行调度到多个线程,map 等中间操作在各自线程中真正并发执行。

⚠️ 注意事项:

  • parallel() 默认并行度为 Runtime.getRuntime().availableProcessors(),可通过 .parallel(n) 自定义;
  • 若 map 内部有共享状态或非线程安全操作(如写入静态变量、修改全局集合),必须自行加锁或使用线程安全结构;
  • sequential() 保证输出顺序与输入分片顺序一致(即 ["a","b"] → ["c","d"] → ...),但不保证各 map 完成时间顺序;
  • 避免在 map 中执行阻塞 I/O;如需异步非阻塞调用,请改用 flatMap + Mono.fromCallable(...).subscribeOn(...)。

掌握 parallel()/runOn()/sequential() 组合,是高效利用多核资源处理批量数据的关键。

热门AI工具

更多
火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

9337

2023.06.15

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

6502

2023.07.05

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

5792

2023.07.31

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1024

2023.08.01

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

848

2023.08.02

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

1216

2023.08.02

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2449

2023.08.02

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

19791

2023.08.03

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

0

2026.09.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
React 教程
React 教程

共58课时 | 12万人学习

国外Web开发全栈课程全集
国外Web开发全栈课程全集

共12课时 | 1.4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn