0

0

Java如何合并多线程结果 Java并行流ParallelStream用法【实战】

月夜之吻

月夜之吻

发布时间:2026-02-23 16:20:15

|

416人浏览过

|

来源于php中文网

原创

parallelstream.collect()必须用线程安全的收集器,否则会抛concurrentmodificationexception;jdk内置收集器如tolist()在并行流中通过分段收集+合并实现安全,但自定义collector需确保combiner线程安全;parallelstream默认使用共享的forkjoinpool.commonpool(),易导致资源争用,i/o密集型任务应改用completablefuture+自定义线程池。

java如何合并多线程结果 java并行流parallelstream用法【实战】

ParallelStream.collect() 必须用线程安全的收集器

并行流不是自动帮你同步结果的。直接用 ArrayList::newArrayList::add 会抛 ConcurrentModificationException,因为多个线程同时往同一个 ArrayList 写。JDK 提供的 Collectors.toList() 看似简单,但它底层用的是非线程安全的 ArrayList,**仅在串行流中安全**;并行流下它内部做了分段收集+合并,所以能用——但这是特例,不能推广到自定义收集器。

实操建议:

  • 优先用 Collectors.toList()Collectors.toSet()Collectors.toMap() 等 JDK 内置收集器,它们已适配并行场景
  • 若需定制结构(如返回 LinkedList 或带初始容量的 ArrayList),改用 Collectors.collectingAndThen() 包装线程安全收集过程
  • 自己写 Collector 时,必须确保 combiner 函数可被任意线程并发调用,且能正确合并两个中间容器

parallelStream() 的 ForkJoinPool 默认共享全局公共池

所有未指定线程池的 parallelStream() 都跑在 ForkJoinPool.commonPool() 上。这意味着:一个耗时长的并行流(比如读大文件+解析)会阻塞其他模块的并行操作,甚至拖慢整个应用的响应。

常见错误现象:

立即学习Java免费学习笔记(深入)”;

  • 本地测试快,上线后某些接口突然变慢,日志显示 ForkJoinPool.commonPool-worker-* 线程长时间 RUNNABLE
  • 两个无关业务共用 parallelStream,其中一个卡住导致另一个超时

实操建议:

  • 对 I/O 密集或不确定耗时的操作,别用 parallelStream(),改用 CompletableFuture.supplyAsync() 配合自定义 ThreadPoolExecutor
  • 真要用并行计算(CPU 密集),且需隔离资源,可临时切换线程池:
    ForkJoinPool pool = new ForkJoinPool(4);<br>pool.submit(() -> list.parallelStream().map(...).collect(...)).join();
  • 注意:parallelStream() 不接受外部线程池参数,只能靠 ForkJoinPool.managedBlock() 或手动 fork/join 模拟

并行流不是总比 for 循环快

小数据量(比如 String::length)、或对象创建开销大的场景,parallelStream 反而更慢——线程调度、分段、合并的成本压过了并行收益。

Shakker
Shakker

多功能AI图像生成和编辑平台

下载

性能影响关键点:

  • 数据源类型:数组(int[]List)分段高效;LinkedList 或自定义 Spliterator 实现不佳时,分割成本高
  • 操作复杂度:如果 map 里有数据库查询或 HTTP 调用,并行只会放大连接池争用和超时风险
  • JVM 预热:首次调用 parallelStream 可能触发 JIT 编译延迟,微基准测试要预热多次

实操建议:

  • JMH 对比 for / stream().sequential() / parallelStream(),不要凭经验猜测
  • 监控实际运行时的 ForkJoinPool.commonPool().getActiveThreadCount(),确认是否真在并行执行
  • 避免在循环体内反复调用 list.parallelStream(),提取成一次流式处理

异常传播机制和 forEach 的陷阱

parallelStream 中若某个线程抛出未捕获异常,整个流会立即终止,但异常可能被吞掉——尤其在 forEach() 中。它不会像 forEachOrdered() 那样按顺序抛出,也不保证第一个异常就是最终抛出的那个。

常见错误现象:

立即学习Java免费学习笔记(深入)”;

  • parallelStream().forEach(...) 里 try-catch 了,但上游异常没被捕获,程序静默失败
  • peek() 打日志调试时,发现日志顺序乱、数量少,误判逻辑没执行

实操建议:

  • map() + collect() 替代 forEach(),把副作用转为纯函数式转换,异常自然向上冒泡
  • 必须用 forEach() 且需容错?改用 Arrays.stream(array).parallel().forEachOrdered()(仅限数组),或自行用 CompletableFuture.allOf() 控制异常聚合
  • 调试时优先用 forEachOrdered(),它牺牲并行性但保证顺序和异常可见性

最易被忽略的一点:parallelStream 的「并行」只作用于数据处理阶段,不解决数据源本身的线程安全问题。比如对一个正在被其他线程修改的 ArrayList 调用 parallelStream(),即使收集器安全,遍历过程仍可能抛 ConcurrentModificationException

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

890

2023.08.02

php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

202

2025.12.04

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

890

2023.08.02

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

594

2024.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

294

2025.08.29

C++中int的含义
C++中int的含义

本专题整合了C++中int相关内容,阅读专题下面的文章了解更多详细内容。

210

2025.08.29

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

1707

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

549

2025.10.17

Golang 测试体系与代码质量保障:工程级可靠性建设
Golang 测试体系与代码质量保障:工程级可靠性建设

Go语言测试体系与代码质量保障聚焦于构建工程级可靠性系统。本专题深入解析Go的测试工具链(如go test)、单元测试、集成测试及端到端测试实践,结合代码覆盖率分析、静态代码扫描(如go vet)和动态分析工具,建立全链路质量监控机制。通过自动化测试框架、持续集成(CI)流水线配置及代码审查规范,实现测试用例管理、缺陷追踪与质量门禁控制,确保代码健壮性与可维护性,为高可靠性工程系统提供质量保障。

6

2026.02.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 4万人学习

C# 教程
C# 教程

共94课时 | 10.4万人学习

Java 教程
Java 教程

共578课时 | 74.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号