返回顶部
首页 > 资讯 > 后端开发 > Python >Java8 中的ParallelStream
  • 411
分享到

Java8 中的ParallelStream

2024-04-02 19:04:59 411人浏览 泡泡鱼

Python 官方文档:入门教程 => 点击学习

摘要

目录1、Stream api 2、ParallelStreams执行原理3、ParallelStreams注意事项前言: 并行编程势不可挡,Java从1.7开始就提供了Fork/J

前言:

并行编程势不可挡,Java从1.7开始就提供了Fork/Join 支持并行处理。java1.8 进一步加强。

并行处理就是将任务拆分子任务,分发给多个处理器同时处理,之后合并。

1、Stream API

Java 8 引入了许多特性,Stream API是其中重要的一部分。区别 InputStream OutputStreamStream API 是处理对象流而不是字节流。

执行原理如下,流分串行和并行两种执行方式


// 串行执行流
stream().filter(e -> e > 10).count();
// 并行执行流
.parallelStream().filter(e -> e > 10).count()

2、ParallelStreams执行原理

并行执行时,java将流划分为多个子流,分散在不同CPU并行处理,然后进行合并。

并行一定比串行更快吗?这不一定,取决于两方面条件:

  • 处理器核心数量,并行处理核心数越多自然处理效率会更高。
  • 处理的数据量越大,优势越强。这也很好理解,比如十个人干一个人就能完成的活儿会比它自己干更便宜?

3、ParallelStreams注意事项

使用并行流时,不要使用collectors.groupingBy,collectors.toMap,替代为

collectors.groupingByConcurrent , collectors.toConcurrentMap,或直接使用串行流。

原因,并行流执行时,通过操作Key来合并多个map的操作比较昂贵。详细大家可以查看官网介绍。

https://docs.oracle.com/javase/tutorial/collections/streams/parallelism.html#concurrent_reduction


Map<String, List<Person>> byGender = 
  roster
   .stream()
   .collect(Collectors.groupingBy(Person::getGender));

ConcurrentMap<String, List<Person>> byGender =         
  roster
   .parallelStream()
   .collect(Collectors.groupingByConcurrent(Person::getGender));

ParallelStreams 默认使用 ForkJoinPool.commonPool()线程池

注意:默认情况下,你写的 ParallelStreams 都是通过该线程池调度执行,整个应用程序都共享这个线程池。

看一个例子,我们查询一批新闻数据,可以利用并行化来处理远程新闻下载。


public List<News> queryNews(Stream<String> ids) {
     return ids.parallel()
            .map(this::getNews) // 网络操作,新闻下载
            .collect(toList());
}

因为是网络操作,存在很多不确定性,假如某个任务运行时间较长,导致线程池资源占据,阻塞其它线程,这样就阻止了其他的并行流任务正常进行。

如果解决这个问题的其中一种方式,进行线程池隔离。那么如何自定义并行流的线程池呢?

ForkJoinPool 构造参数我们默认设置为CPU核心数。


ForkJoinPool customThreadPool = new ForkJoinPool(4);
long actualTotal = customThreadPool
  .submit(() -> roster.parallelStream().reduce(0, Integer::sum)).get();


总结:

Java 1.8 提供的Stream API简化了代码,很好用。不过在使用过程中应该注意以上问题。

到此这篇关于Java8 中的并行流 ParallelStreams的文章就介绍到这了,更多相关Java8 ParallelStreams内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: Java8 中的ParallelStream

本文链接: https://lsjlt.com/news/155112.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • Java8 中的ParallelStream
    目录1、Stream API 2、ParallelStreams执行原理3、ParallelStreams注意事项前言: 并行编程势不可挡,Java从1.7开始就提供了Fork/J...
    99+
    2024-04-02
  • Java8的Stream()与ParallelStream()的区别说明
    Java8 Stream()与ParallelStream()区别 Stream 无状态:指元素的处理不受之前元素的影响; 有状态:指该操作只有拿到所有元素之后才能继续下去。 非短...
    99+
    2024-04-02
  • 基于Java8并行流(parallelStream)的注意点
    Java8并行流(parallelStream)注意点 在最初使用并行流的时候,查询列表会偶尔性报空指针异常,这令我非常纳闷 代码是这样的: List<OrderListV...
    99+
    2024-04-02
  • parallelStream的坑实例分析
    这篇文章主要讲解了“parallelStream的坑实例分析”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“parallelStream的坑实例分析”吧!很多同学喜欢使用lambda表达式,它...
    99+
    2023-06-27
  • ParallelStream使用的坑怎么解决
    今天小编给大家分享一下ParallelStream使用的坑怎么解决的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。比如下面的代...
    99+
    2023-06-17
  • 解决JDK8的ParallelStream遍历无序的问题
    JDK8的ParallelStream遍历无序 ParallelStream其实就是一个并行执行的流 它通过默认的ForkJoinPool,可能提高你的多线程任务的速度. Strea...
    99+
    2024-04-02
  • java8中的Collectors.groupingBy怎么用
    这篇“java8中的Collectors.groupingBy怎么用”文章,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要参考一下,对于“java8中的Collectors.groupingBy怎么用”,小编整理了以...
    99+
    2023-06-14
  • 如何解决JDK8的ParallelStream遍历无序的问题
    这篇文章主要介绍了如何解决JDK8的ParallelStream遍历无序的问题,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。JDK8的ParallelStream遍历无序Pa...
    99+
    2023-06-20
  • java8中的Collectors.groupingBy用法详解
    Collectors.groupingBy根据一个或多个属性对集合中的项目进行分组 数据准备: public Product(Long id, Integer num, Big...
    99+
    2024-04-02
  • Java8中Stream的使用方式
    目录前言:1. 为什么有经验的老手更倾向于使用Stream2. Stream 的使用方式3. Stream 的创建4. Stream 中间操作5. Stream 终止操作6. Str...
    99+
    2024-04-02
  • 深入学习java8 中的CompletableFuture
    目录1 前言2 简单使用3 异步处理3.1 thenApply3.2 thenAccept 和 thenRun3.3 exceptionally 异常处理3.4 whenComple...
    99+
    2024-04-02
  • 如何使用Java8中的StringJoiner
    这篇文章主要介绍“如何使用Java8中的StringJoiner”,在日常操作中,相信很多人在如何使用Java8中的StringJoiner问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”如何使用Java8中的...
    99+
    2023-06-15
  • Java8中CompletableFuture的用法全解
    目录前言一、创建异步任务1、Future.submit2、supplyAsync / runAsync二、异步回调1、thenApply / thenApplyA...
    99+
    2024-04-02
  • java8中Predicates是什么
    这篇文章主要为大家展示了“java8中Predicates是什么”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“java8中Predicates是什么”这篇文章吧。PredicatesPredic...
    99+
    2023-06-17
  • Java8 Collectors.toMap的坑
    按照常规思维,往一个map里put一个已经存在的key,会把原有的key对应的value值覆盖,然而通过一次线上问题,发现Java8中的Collectors.toMap反其道而行之,...
    99+
    2024-04-02
  • Java8中的Stream 流实践操作
    目录1 前言2 Stream 的分类3 Stream 的操作3.1 创建流的方式3.2 流的中间操作3.3 流的终止操作总结1 前言 Stream 是 java8 中处理集合的抽象概...
    99+
    2024-04-02
  • Java8中ConcurrentHashMap的原理是什么
    这期内容当中小编将会给大家带来有关Java8中ConcurrentHashMap的原理是什么,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。Java是什么Java是一门面向对象编程语言,可以编写桌面应用程序...
    99+
    2023-06-14
  • 详解Java8 StreamAPI中的map()方法
    目录前言概述示例总结Stream API 是Java8中新加入的功能,现在都 Java20 了,不会还有人没用过吧? 今天给大家演示一下 Stream API&n...
    99+
    2023-05-14
    Java8 StreamAPI map方法 Java8 StreamAPI map Java8 map Java8 StreamAPI
  • 详解Java8中CompletableFuture类的使用
    目录创建CompletableFuture处理CompletableFuture的结果处理CompletableFuture的异常总结Java 8中引入了CompletableFut...
    99+
    2023-05-15
    Java8 CompletableFuture类使用 Java8 CompletableFuture类 Java8 CompletableFuture
  • 详解java8中的Stream数据流
    Stream是java8引入的一个重度使用lambda表达式的API。Stream使用一种类似用SQL语句从数据库查询数据的直观方式来提供一种对Java集合运算和表达的高阶抽象。直观意味着开发者在写代码时只需关注他们想要的结果是什么而无需关...
    99+
    2023-05-31
    java8 stream 数据流
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作