0

0

使用并行流并发处理共享列表并收集结果

DDD

DDD

发布时间:2025-09-09 22:39:01

|

392人浏览过

|

来源于php中文网

原创

使用并行流并发处理共享列表并收集结果

本文将探讨如何高效地并发处理共享列表,并收集处理结果。在处理大量数据时,将任务分解为多个子任务并行执行可以显著提高效率。Java 8引入的并行流(Parallel Streams)为我们提供了一种简洁而强大的方式来实现这一目标。

并行流简介

并行流是Java 8 Stream API的一个特性,它允许你以声明式的方式并行处理集合数据。与传统的顺序流不同,并行流会将数据分割成多个块,并在多个线程上同时处理这些块。这使得我们可以充分利用多核处理器的优势,从而加速数据处理过程。

使用并行流处理子列表

假设我们有一个大型列表,需要将其分割成多个子列表,并对每个子列表执行耗时的handle()操作。以下代码展示了如何使用并行流来实现这一目标:

import java.util.List;
import java.util.stream.Collectors;

class Foo {
    private int len;

    public Foo(int len) {
        this.len = len;
    }

    public void process(List list) {
        int start = 0;
        while (start < list.size()) {
            int end = Math.min(start + len, list.size());
            List sublist = list.subList(start, end);
            processSublist(sublist);
            start = end;
        }
    }

    private void processSublist(List sublist) {
        // 使用并行流处理子列表
        sublist.parallelStream()
               .forEach(this::handle);
    }

    private void handle(Bar bar) {
        // 耗时的处理逻辑
        // 例如:bar.doSomething();
        try {
            Thread.sleep(10); // 模拟耗时操作
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }
}

class Bar {
    // Bar 类的定义
}

在这个例子中,processSublist()方法接收一个子列表,并使用parallelStream()方法将其转换为并行流。然后,forEach()方法将对流中的每个元素(Bar对象)调用handle()方法。由于使用了并行流,handle()方法将会在多个线程上同时执行,从而加速整个处理过程。

收集处理结果

如果handle()方法返回一个结果,并且我们需要将所有结果收集到一个列表中,可以使用map()和collect()方法:

import java.util.List;
import java.util.stream.Collectors;

class Foo {
    private int len;

    public Foo(int len) {
        this.len = len;
    }

    public void process(List list) {
        int start = 0;
        while (start < list.size()) {
            int end = Math.min(start + len, list.size());
            List sublist = list.subList(start, end);
            processSublist(sublist);
            start = end;
        }
    }

    private void processSublist(List sublist) {
        // 使用并行流处理子列表并收集结果
        List results = sublist.parallelStream()
                .map(this::handle)
                .collect(Collectors.toList());

        // 处理结果列表
        // 例如:results.forEach(result -> System.out.println(result.getValue()));
    }

    private Result handle(Bar bar) {
        // 耗时的处理逻辑,返回一个结果
        // 例如:return new Result(bar.getValue() * 2);
        try {
            Thread.sleep(10); // 模拟耗时操作
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
        return new Result(1); // 示例返回值
    }
}

class Bar {
    // Bar 类的定义
}

class Result {
    private int value;

    public Result(int value) {
        this.value = value;
    }

    public int getValue() {
        return value;
    }
}

在这个例子中,map()方法将对流中的每个Bar对象调用handle()方法,并将返回的结果(Result对象)转换为一个新的流。然后,collect(Collectors.toList())方法将收集这个流中的所有结果,并将它们存储到一个新的List中。

赣极购物商城网店建站软件系统
赣极购物商城网店建站软件系统

大小仅1兆左右 ,足够轻便的商城系统; 易部署,上传空间即可用,安全,稳定; 容易操作,登陆后台就可设置装饰网站; 并且使用异步技术处理网站数据,表现更具美感。 前台呈现页面,兼容主流浏览器,DIV+CSS页面设计; 如果您有一定的网页设计基础,还可以进行简易的样式修改,二次开发, 发布新样式,调整网站结构,只需修改css目录中的css.css文件即可。 商城网站完全独立,网站源码随时可供您下载

下载

同步共享资源

在使用并行流时,需要特别注意同步共享资源。如果handle()方法访问或修改了共享变量,必须使用适当的同步机制(例如,synchronized关键字或java.util.concurrent包中的类)来确保线程安全。否则,可能会导致数据竞争、死锁或其他并发问题。

例如,如果handle()方法需要更新一个共享计数器,可以使用AtomicInteger类来实现线程安全的计数:

import java.util.List;
import java.util.concurrent.atomic.AtomicInteger;
import java.util.stream.Collectors;

class Foo {
    private int len;
    private AtomicInteger counter = new AtomicInteger(0);

    public Foo(int len) {
        this.len = len;
    }

    public void process(List list) {
        int start = 0;
        while (start < list.size()) {
            int end = Math.min(start + len, list.size());
            List sublist = list.subList(start, end);
            processSublist(sublist);
            start = end;
        }
    }

    private void processSublist(List sublist) {
        // 使用并行流处理子列表
        sublist.parallelStream()
                .forEach(this::handle);
    }

    private void handle(Bar bar) {
        // 耗时的处理逻辑,更新共享计数器
        counter.incrementAndGet();
        try {
            Thread.sleep(10); // 模拟耗时操作
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }

    public int getCounter() {
        return counter.get();
    }
}

class Bar {
    // Bar 类的定义
}

在这个例子中,AtomicInteger counter是一个线程安全的计数器。handle()方法使用counter.incrementAndGet()方法来原子地增加计数器的值。这确保了即使在多个线程同时执行handle()方法时,计数器的值也能正确更新。

注意事项

  • 并行流的性能优势只有在处理大量数据且handle()方法耗时较长时才能体现出来。对于小数据集或简单的handle()方法,使用顺序流可能更有效率。
  • 过度使用并行流可能会导致线程上下文切换的开销增加,从而降低性能。
  • 在使用并行流时,应该仔细考虑线程安全问题,并使用适当的同步机制来保护共享资源。

总结

Java的并行流为我们提供了一种方便而强大的方式来并发处理集合数据。通过将列表分割成多个子列表,并使用parallelStream()方法,可以充分利用多核处理器的优势,显著提升处理效率。然而,在使用并行流时,需要特别注意同步共享资源,并仔细评估其性能影响。在合适的场景下,并行流可以极大地提高数据处理的速度和效率。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

97

2025.12.04

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

546

2023.08.10

golang map内存释放
golang map内存释放

本专题整合了golang map内存相关教程,阅读专题下面的文章了解更多相关内容。

75

2025.09.05

golang map相关教程
golang map相关教程

本专题整合了golang map相关教程,阅读专题下面的文章了解更多详细内容。

36

2025.11.16

golang map原理
golang map原理

本专题整合了golang map相关内容,阅读专题下面的文章了解更多详细内容。

61

2025.11.17

java判断map相关教程
java判断map相关教程

本专题整合了java判断map相关教程,阅读专题下面的文章了解更多详细内容。

42

2025.11.27

go语言 注释编码
go语言 注释编码

本专题整合了go语言注释、注释规范等等内容,阅读专题下面的文章了解更多详细内容。

32

2026.01.31

go语言 math包
go语言 math包

本专题整合了go语言math包相关内容,阅读专题下面的文章了解更多详细内容。

23

2026.01.31

go语言输入函数
go语言输入函数

本专题整合了go语言输入相关教程内容,阅读专题下面的文章了解更多详细内容。

16

2026.01.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 3.1万人学习

C# 教程
C# 教程

共94课时 | 8.3万人学习

Java 教程
Java 教程

共578课时 | 55.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号