当前位置:

首页 > 编程开发 > 怎么区分 Stream 流的并行处理 parallel() 与普通处理在底层线程池(ForkJoinPool)的共用

怎么区分 Stream 流的并行处理 parallel() 与普通处理在底层线程池(ForkJoinPool)的共用

怎么区分 Stream 流的并行处理 parallel() 与普通处理在底层线程池(ForkJoinPool)的共用 简单来说,并行流的 parallel() 并不创建新线程池,而是直接复用 JVM 全局共享的 ForkJoinPool.commonPool()。普通流(stream())则完全是另

本文目录

    怎么区分 Stream 流的并行处理 parallel() 与普通处理在底层线程池(ForkJoinPool)的共用

    怎么区分 Stream 流的并行处理 parallel() 与普通处理在底层线程池(ForkJoinPool)的共用

    简单来说,并行流的 parallel() 并不创建新线程池,而是直接复用 JVM 全局共享的 ForkJoinPool.commonPool()。普通流(stream())则完全是另一回事——它只在当前调用线程中顺序执行,根本不涉及任何线程池和并发调度。

    parallel() 的线程池来源是固定的

    所有未显式指定线程池的并行流,底层都走同一个 ForkJoinPool 实例:ForkJoinPool.commonPool()。这里有个关键点:这个池子不是每次调用时新建的,而是 JVM 启动时初始化一次的静态共享池。

    • 它的默认并行度计算公式是:Runtime.getRuntime().a vailableProcessors() - 1。举个例子,在一台8核的机器上,默认就是7个并行线程。
    • 这个默认值是可以提前配置的,通过系统属性就能调整:System.setProperty("ja va.util.concurrent.ForkJoinPool.common.parallelism", "12");
    • 需要注意的是,这个设置是全局性的。它影响的不仅仅是 parallelStream,所有使用 commonPool 的地方都会生效,比如 ForkJoinTask.invoke() 和 CompletableFuture 的默认异步执行。

    普通流 stream() 完全不依赖线程池

    像 list.stream().filter(...).map(...) 这样的普通流操作,整个链路都在当前线程内完成。没有任务提交、没有工作窃取、也没有线程调度的开销。它的执行模型和传统的 for 循环一样,是纯同步、单线程且行为可预测的。

    • 它不会触发任何 ForkJoinPool 的初始化。
    • 不会占用 commonPool 的线程或队列资源。
    • 即使在多线程环境中调用,每个线程也只是各自执行自己的 stream 操作,彼此完全隔离。

    如何验证是否共用同一个 commonPool

    想亲眼看看是不是真的共用一个池子?可以通过打印线程名或检查池状态来验证:

    • 在 parallelStream 操作中打印线程名:
      .forEach(x -> System.out.println(Thread.currentThread().getName()))
      你会看到输出中包含类似 ForkJoinPool.commonPool-worker-1 这样的名称。
    • 对比调用 ForkJoinPool.commonPool().toString() 和 list.parallelStream().count() 前后,池子的 activeThreadCount 或 poolSize 等状态值会发生变化。
    • 最直接的证据是,当多个并行流同时运行时,它们的子任务会竞争同一组 worker 线程,而不是各自独占一套资源。

    注意:sequential() 不会切换线程池

    这里有个容易混淆的地方:调用 .parallel().sequential() 只是让后续操作退回到单线程顺序执行模式。但是,整个流可能已经在 commonPool 中启动过 fork/join 分支了。这个方法并不会释放线程,也不会切换到其他池子——它的作用仅仅是“不再进行并行调度”,而实际执行任务的线程,很可能还是 commonPool 里的某个 worker。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发
    相关文章 更多
    c#如何使用FileStream_c#FileStream看这一篇就够了_保姆级教程
    c#如何使用FileStream_c#FileStream看这一篇就够了_保姆级教程

    FileStream适用于大文件、多进程共享及精确控制读写位置等场景,其构造函数需合理选择FileMode、FileAccess和FileShare参数。使用using确保及时释放句柄,避免文件占用。读写字符串时必须统一编码,否则会产生乱码。

    c++如何读取内存中的压缩数据流_z_stream用法【深度】
    c++如何读取内存中的压缩数据流_z_stream用法【深度】

    使用z_stream解压内存数据需手动管理缓冲区与状态:先清零结构体,正确设置窗口位宽参数,然后循环调用inflate()函数直至返回Z_STREAM_END,期间动态扩容输出缓冲区,最后调用inflateEnd()清理,否则容易导致崩溃或数据不完整。

    如何使用 ObjectOutputStream 序列化具有继承关系的复杂业务实体对象
    如何使用 ObjectOutputStream 序列化具有继承关系的复杂业务实体对象

    父类必须实现Serializable,否则子类序列化时抛出NotSerializableException异常;所有继承链上的类都应显式声明serialVersionUID,并遵循兼容性规则进行更新;transient和static字段在继承层次中同样影响序列化行为;构造函数在序列化过程中不会被调用,因此父类无参构造函数非必需。

    C++实现字符串中单词的顺序翻转 _ 结合stringstream与reverse技巧【详解】
    C++实现字符串中单词的顺序翻转 _ 结合stringstream与reverse技巧【详解】

    使用std::stringstream按空格拆分单词存入vector,再通过std::reverse整体反转单词顺序,最后手动拼接并添加空格,注意避免首尾多余空格。该方法仅适用于ASCII字符串,不支持UTF-8等多字节字符,否则会因字节误分割导致乱码。

    怎么利用 Stream.builder() 手动构建一个包含特定业务对象的流
    怎么利用 Stream.builder() 手动构建一个包含特定业务对象的流

    Stream.builder()适用于小批量确定值元素场景,需要先获取builder实例,通过add()逐个添加元素后调用build()生成流,泛型类型需显式指定。不适用于大批量填充,不建议转为并行流,但构建出的流支持limit、findFirst等常用短路操作。

    怎么利用 Stream.anyMatch() 检查流中是否有满足条件的项
    怎么利用 Stream.anyMatch() 检查流中是否有满足条件的项

    anyMatch()是JavaStream的短路终端操作,当流中任意元素满足谓词时立即返回true,若流为空则返回false。请注意:不能与findFirst()或filter()链式调用,因为流被终端操作关闭后无法再次使用,会抛出异常。谓词内需防范null元素,应使用Objects.nonNull()判空以避免空指针异常。

    如何利用 Stream.of() 快速构建一个简单的对象流
    如何利用 Stream.of() 快速构建一个简单的对象流

    Stream.of()适用于快速将多个明确对象转为流,避免集合中转。传数组会被视为单个元素,应改用Arrays.stream()或直接列元素。对null值应使用Stream.ofNullable()或手动判空。自定义对象流需注意覆盖基础方法,且流不可重复消费。

    如何利用 Stream 的 parallelStream 配合自定义 ForkJoinPool 规避并行流对主线程池的阻塞
    如何利用 Stream 的 parallelStream 配合自定义 ForkJoinPool 规避并行流对主线程池的阻塞

    parallelStream默认使用全局共享的ForkJoinPool.commonPool,子任务阻塞会拖慢所有并行流。正确做法是创建自定义ForkJoinPool,将整个并行流作为任务提交执行。对I/O密集型任务,建议将阻塞操作包装进CompletableFuture,使用专用线程池分离职责。线程池并行度需根据任务类型合理设置,避免简单设为CPU核数。

    Files.lines() 惰性读取:分析在处理 GB 级超大文本文件变量时利用 Stream 流规避内存溢出的策略
    Files.lines() 惰性读取:分析在处理 GB 级超大文本文件变量时利用 Stream 流规避内存溢出的策略

    Files.lines()看似惰性,但sorted()或collect()会全量加载导致OOM。安全用法:逐行forEach避免全量操作,用try-with-resources显式关闭并指定UTF-8编码,可结合缓冲批处理提升吞吐。

    怎么通过 Stream.findAny() 在多核处理器上利用并行流优势快速碰撞出第一个匹配项
    怎么通过 Stream.findAny() 在多核处理器上利用并行流优势快速碰撞出第一个匹配项

    并行流findAny()利用多核并行与短路机制,任一线程找到结果立即终止,无需维护顺序,基于ForkJoinPool实现高效负载均衡。特别适用于数据量大且不关心顺序的场景,需通过parallelStream()启动才能触发并行处理,可显著提升性能。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。