当前位置:

首页 > 编程开发 > 如何在 Reactor 中向现有 Flux 引入数据并合并流

如何在 Reactor 中向现有 Flux 引入数据并合并流

本文旨在深入探讨如何在Reactor框架中,特别是面对由外部库提供的现有Flux时,有效地引入新数据并将其与现有流合并。文章将阐明直接“发射”到Flux的局限性,重点讲解通过创建新的数据流并使用Flux.merge等操作符进行合并的策略,同时强调了处理一次性订阅Flux的关键注意事项与解决方案。

本文目录

    如何在 Reactor 中向现有 Flux 引入数据并合并流

    本文旨在深入探讨如何在 Reactor 框架中,特别是面对由外部库提供的现有 Flux 时,有效地引入新数据并将其与现有流合并。文章将阐明直接“发射”到 Flux 的局限性,重点讲解通过创建新的数据流并使用 Flux.merge 等操作符进行合并的策略,同时强调了处理一次性订阅 Flux 的关键注意事项与解决方案。

    1. 理解 Reactor Flux 的发布者特性

    在 Reactor 编程模型中,Flux 和 Mono 是数据发布者(Publisher),它们负责按照 Reactive Streams 规范将数据序列发布给订阅者(Subscriber)。与传统的命令式编程中的队列或列表不同,Flux 并非一个可以直接“写入”或“发射”数据进去的容器。因此,像 aFluxMap.emit(myObj) 这样的方法在 Flux 或 Mono 接口中是不存在的。

    如果你希望将自定义数据引入到响应式流中,你需要做的是创建一个 新的 发布者,由这个发布者来产生你的数据。

    2. 创建自定义数据源

    为了动态地向响应式流中注入数据,Reactor 提供了多种机制来创建可控制的发布者。其中最常用且灵活的方式是使用 Sinks API 或 FluxProcessor。

    2.1 使用 Sinks.many() (推荐)

    Sinks 是 Reactor 3.4 引入的更现代、更安全的 API,用于创建多值(Sinks.many())或单值(Sinks.one())的发布者,并提供了一个 FluxSink 类似的接口来发射数据。

    import reactor.core.publisher.Flux;
    import reactor.core.publisher.Sinks;
    
    public class CustomDataSource {
    
        // 定义一个 Sinks.Many 对象,用于发射 MyRawType 类型的数据
        // 这里使用 unicast() 模式,表示只有一个订阅者
        private final Sinks.Many rawTypeSink = Sinks.many().unicast().onBackpressureBuffer();
    
        // 暴露一个 Flux 供外部订阅
        public Flux getRawTypeFlux() {
            return rawTypeSink.asFlux();
        }
    
        // 外部调用此方法来发射数据
        public void emitRawType(MyRawType data) {
            rawTypeSink.tryEmitNext(data).orThrow(); // 尝试发射数据,如果失败则抛出异常
        }
    
        // 示例:MyRawType 是你的原始数据类型
        static class MyRawType {
            String id;
            // ... constructor, getters, etc.
        }
    
        public static void main(String[] args) {
            CustomDataSource dataSource = new CustomDataSource();
            Flux myRawFlux = dataSource.getRawTypeFlux();
    
            myRawFlux.map(raw -> {
                // 模拟将 MyRawType 转换为 MappedType
                System.out.println("Converting raw: " + raw.id);
                return new MappedType("Mapped-" + raw.id);
            }).subscribe(mapped -> System.out.println("Received MappedType: " + mapped.name));
    
            // 动态发射数据
            dataSource.emitRawType(new MyRawType("A"));
            dataSource.emitRawType(new MyRawType("B"));
            // ...
        }
    
        // 示例:MappedType 是外部库期望的类型
        static class MappedType {
            String name;
            // ... constructor, getters, etc.
            public MappedType(String name) { this.name = name; }
        }
    }

    2.2 使用 FluxProcessor (传统方式)

    FluxProcessor 是一类特殊的 Flux,它同时实现了 Subscriber 和 Publisher 接口,可以作为数据处理链中的桥梁。UnicastProcessor 是一个常见的选择,但它有“一次性订阅”的限制(详见后续章节)。

    import reactor.core.publisher.Flux;
    import reactor.core.publisher.UnicastProcessor;
    import reactor.core.publisher.FluxSink;
    
    public class CustomDataSourceProcessor {
    
        private final UnicastProcessor myProcessor = UnicastProcessor.create();
        private final FluxSink mySink = myProcessor.sink();
    
        public Flux getRawTypeFlux() {
            return myProcessor;
        }
    
        public void emitRawType(MyRawType data) {
            mySink.next(data);
        }
    
        // MyRawType 和 MappedType 定义同上
        static class MyRawType { String id; public MyRawType(String id) { this.id = id; } }
        static class MappedType { String name; public MappedType(String name) { this.name = name; } }
    
        public static void main(String[] args) {
            CustomDataSourceProcessor dataSource = new CustomDataSourceProcessor();
            Flux myRawFlux = dataSource.getRawTypeFlux();
    
            myRawFlux.map(raw -> {
                System.out.println("Converting raw: " + raw.id);
                return new MappedType("Mapped-" + raw.id);
            }).subscribe(mapped -> System.out.println("Received MappedType: " + mapped.name));
    
            dataSource.emitRawType(new MyRawType("X"));
            dataSource.emitRawType(new MyRawType("Y"));
        }
    }

    3. 合并现有 Flux 与新数据流

    一旦你创建了自己的数据源(例如 myRawFlux),下一步就是将其与外部库提供的 Flux 进行整合。这里的关键是,你的自定义数据在与外部库的 Flux 合并之前,通常需要先转换为相同的类型 (MappedType)。

    假设外部库提供的方法如下:

    public class Library {
        public static Flux createMappingToMappedType() {
            // 模拟一个持续产生 MappedType 的 Flux
            return Flux.just(new MappedType("Lib-1"), new MappedType("Lib-2"))
                       .delayElements(java.time.Duration.ofMillis(100));
        }
    }

    现在,我们将你的自定义数据流(经过转换后)与 Library.createMappingToMappedType() 返回的 Flux 进行合并。

    import reactor.core.publisher.Flux;
    import reactor.core.publisher.Sinks;
    import java.time.Duration;
    
    public class FluxMergingExample {
    
        // 假设这是你的原始数据类型和目标映射类型
        static class MyRawType { String id; public MyRawType(String id) { this.id = id; } }
        static class MappedType { String name; public MappedType(String name) { this.name = name; } }
    
        // 模拟外部库
        static class Library {
            public static Flux createMappingToMappedType() {
                System.out.println("Library.createMappingToMappedType() called.");
                return Flux.interval(Duration.ofMillis(200)) // 每200ms产生一个元素
                           .map(i -> new MappedType("Lib-Item-" + i))
                           .take(3); // 只取3个元素
            }
        }
    
        // 模拟将原始类型转换为映射类型的方法
        private static MappedType convertRawToMappedType(MyRawType raw) {
            System.out.println("Converting raw: " + raw.id);
            return new MappedType("My-Converted-" + raw.id);
        }
    
        public static void main(String[] args) throws InterruptedException {
            // 1. 创建你的自定义数据源
            Sinks.Many myRawSink = Sinks.many().unicast().onBackpressureBuffer();
            Flux myRawFlux = myRawSink.asFlux();
    
            // 2. 将你的原始数据流转换为 MappedType
            Flux myConvertedFlux = myRawFlux.map(FluxMergingExample::convertRawToMappedType);
    
            // 3. 获取外部库的 Flux
            Flux aFluxMap = Library.createMappingToMappedType();
    
            // 4. 合并两个 MappedType 流
            // Flux.merge 用于并行合并,元素会根据到达时间交叉输出
            Flux combinedFlux = Flux.merge(aFluxMap, myConvertedFlux);
    
            // 5. 订阅并处理合并后的流
            combinedFlux.doOnNext(converted -> System.out.println("Received combined MappedType: " + converted.name))
                        .doOnComplete(() -> System.out.println("Combined Flux completed!"))
                        .subscribe();
    
            // 6. 动态发射你的数据
            System.out.println("Emitting custom data...");
            myRawSink.tryEmitNext(new MyRawType("A")).orThrow();
            Thread.sleep(100); // 稍作等待
            myRawSink.tryEmitNext(new MyRawType("B")).orThrow();
            Thread.sleep(300); // 稍作等待,让库的Flux也能发射一些
            myRawSink.tryEmitNext(new MyRawType("C")).orThrow();
            myRawSink.tryEmitComplete(); // 完成你的数据源
    
            // 等待所有异步操作完成
            Thread.sleep(1000);
        }
    }

    在 Reactor 中,有几个常用的操作符用于合并流:

    • **`Flux
    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发
    相关文章 更多
    GitHub Copilot模型停用后会自动替换吗,哪些事情仍需提前确认?
    GitHub Copilot模型停用后会自动替换吗,哪些事情仍需提前确认?

    Copilot停用旧模型不等于自动迁移;区分移除、组织模型启用、工作流切换与个人年订阅例外。

    GitHub Actions重跑失败作业会使用最新代码吗
    GitHub Actions重跑失败作业会使用最新代码吗

    解释已有运行重跑的提交和权限边界,给出确认、失败作业重跑及结果核对命令,区分漏触发事件。

    chat-demo v0.1.1怎么本地运行并理解DeepSeek历史数据边界
    chat-demo v0.1.1怎么本地运行并理解DeepSeek历史数据边界

    chat-demo v0.1.1可以作为静态聊天客户端在本地运行,但模型、搜索、文件和语音能力仍由DeepSeek API提供。源码运行环境为Node.js 22.12及以上、Git与pnpm。Demo版本号不等于应用API版本;这套应用API未单独标版本,默认聊天模型ID是deepseek-flash。

    GitHub Copilot CLI v1.0.111的用量图与上下文比例应该怎样理解
    GitHub Copilot CLI v1.0.111的用量图与上下文比例应该怎样理解

    理解GitHub Copilot CLI v1.0.111的高级请求百分比、用户提示活动图与实际路由模型窗口,区分显示口径和任务状态。

    n8n 2.47.6、2.47.7、2.48.3 Beta、2.48.4 Beta、3.2.2预发布与1.123.96适用哪些安全修复?
    n8n 2.47.6、2.47.7、2.48.3 Beta、2.48.4 Beta、3.2.2预发布与1.123.96适用哪些安全修复?

    按维护分支、利用权限与节点类型对应四项修复,区分正式补丁、Beta和临时缓解的适用边界。

    GitHub合并故障的已缓解、监控与已解决有什么不同
    GitHub合并故障的已缓解、监控与已解决有什么不同

    GitHub合并故障中的“已缓解并监控”和“已解决”不能互换。前者表示影响已经采取措施缓解,仍在观察稳定性;后者是供应商正式结束这场事故的状态。11月13日的Pull Requests合并超时事件先进入监控,随后于北京时间11月14日02:29标记为已解决。

    llama.cpp v1.0.0的网页聊天分组与Markdown编辑适合哪些场景
    llama.cpp v1.0.0的网页聊天分组与Markdown编辑适合哪些场景

    llama.cpp v1.0.0改善聊天组织、长消息编辑和附件预览;界面变化与底层API迁移、缓存及访问边界需要分别理解。

    Postman 12.36.4 更新后仍报错,怎么判断是哪一层的问题
    Postman 12.36.4 更新后仍报错,怎么判断是哪一层的问题

    Postman 12.36.4 更新后仍有异常时,可按应用、API请求和平台服务区分问题范围,避免把补丁版本当作故障原因。

    n8n 2.47.6、2.48.3 Beta与1.123.96适合哪些部署环境?
    n8n 2.47.6、2.48.3 Beta与1.123.96适合哪些部署环境?

    按正式、预发布和1.x维护渠道对应补丁,再结合Redis、Agent端点和Pinecone索引判断适用范围。

    Codex CLI 0.169.0与0.171.0-alpha.2怎样选择,终端工作区适合哪些任务
    Codex CLI 0.169.0与0.171.0-alpha.2怎样选择,终端工作区适合哪些任务

    Codex CLI 0.169.0提供有明确说明的终端工作区能力;0.171.0-alpha.2为预发布,当前没有功能清单,选用时应分开评估。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。