Java8 中用法优雅的 Stream,性能也”优雅”吗?

沙海 2021年4月9日12:54:18杂谈 Java评论36字数 3295阅读10分59秒阅读模式
摘要

Java8 中用法优雅的 Stream,性能也”优雅”吗? 架构师编辑部 架构师专栏

Java8 中用法优雅的 Stream,性能也"优雅"吗?

架构师编辑部 架构师专栏 文章源自JAVA秀-https://www.javaxiu.com/10303.html

大家好,我是磊哥。

文章源自JAVA秀-https://www.javaxiu.com/10303.html

磊哥,见过很多公众号,博客,已经对Stream API的用法鼓吹够多了,用起简洁直观,但性能到底怎么样呢?会不会有很高的性能损失?我们对Stream API的性能一探究竟。文章源自JAVA秀-https://www.javaxiu.com/10303.html

文章源自JAVA秀-https://www.javaxiu.com/10303.html

为保证测试结果真实可信,我们将JVM运行在 -server模式下,测试数据在GB量级,测试机器采用常见的商用服务器,配置如下:文章源自JAVA秀-https://www.javaxiu.com/10303.html

OSCentOS 6.7 x86_64
CPUIntel Xeon X5675, 12M Cache 3.06 GHz, 6 Cores 12 Threads
内存96GB
JDKjava version 1.8.0_91, Java HotSpot(TM) 64-Bit Server VM

测试方法和测试数据文章源自JAVA秀-https://www.javaxiu.com/10303.html

性能测试并不是容易的事,Java性能测试更费劲,因为虚拟机对性能的影响很大,JVM对性能的影响有两方面:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、GC的影响。GC的行为是Java中很不好控制的一块,为增加确定性,我们手动指定使用CMS收集器,并使用10GB固定大小的堆内存。集体到JVM参数就是 -XX:+UseConcMarkSweepGC-Xms10G-Xmx10G2、JIT(Just-In-Time)即时编译技术。即时编译技术会将热点代码在JVM运行的过程中编译成本地代码,测试时我们会先对程序预热,触发对测试函数的即时编译。相关的JVM参数是 -XX:CompileThreshold=10000文章源自JAVA秀-https://www.javaxiu.com/10303.html

Stream并行执行时用到 ForkJoinPool.commonPool()得到的线程池,为控制并行度我们使用Linux的 taskset命令指定JVM可用的核数。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试数据由程序随机生成。为防止一次测试带来的抖动,测试4次求出平均时间作为运行时间。文章源自JAVA秀-https://www.javaxiu.com/10303.html

实验一 基本类型迭代

测试内容:找出整型数组中的最小值。对比for循环外部迭代和Stream API内部迭代性能。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试程序 IntTest文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://github.com/CarpenterLee/JavaLambdaInternals/blob/master/perf/StreamBenchmark/src/lee/IntTest.java文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试结果如下图:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_1.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

图中展示的是for循环外部迭代耗时为基准的时间比值。分析如下:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、对于基本类型Stream串行迭代的性能开销明显高于外部迭代开销(两倍);2、Stream并行迭代的性能比串行迭代和外部迭代都好。文章源自JAVA秀-https://www.javaxiu.com/10303.html

并行迭代性能跟可利用的核数有关,上图中的并行迭代使用了全部12个核,为考察使用核数对性能的影响,我们专门测试了不同核数下的Stream并行迭代效果:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_2.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

分析,对于基本类型:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、使用Stream并行API在单核情况下性能很差,比Stream串行API的性能还差;文章源自JAVA秀-https://www.javaxiu.com/10303.html

2、随着使用核数的增加,Stream并行效果逐渐变好,比使用for循环外部迭代的性能还好。文章源自JAVA秀-https://www.javaxiu.com/10303.html

以上两个测试说明,对于基本类型的简单迭代,Stream串行迭代性能更差,但多核情况下Stream迭代时性能较好。文章源自JAVA秀-https://www.javaxiu.com/10303.html

实验二 对象迭代

再来看对象的迭代效果。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试内容:找出字符串列表中最小的元素(自然顺序),对比for循环外部迭代和Stream API内部迭代性能。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试程序StringTest文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://github.com/CarpenterLee/JavaLambdaInternals/blob/master/perf/StreamBenchmark/src/lee/StringTest.java文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试结果如下图:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_3.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

结果分析如下:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、对于对象类型Stream串行迭代的性能开销仍然高于外部迭代开销(1.5倍),但差距没有基本类型那么大。2、Stream并行迭代的性能比串行迭代和外部迭代都好。文章源自JAVA秀-https://www.javaxiu.com/10303.html

再来单独考察Stream并行迭代效果:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_4.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

分析,对于对象类型:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、使用Stream并行API在单核情况下性能比for循环外部迭代差;文章源自JAVA秀-https://www.javaxiu.com/10303.html

2、随着使用核数的增加,Stream并行效果逐渐变好,多核带来的效果明显。文章源自JAVA秀-https://www.javaxiu.com/10303.html

以上两个测试说明,对于对象类型的简单迭代,Stream串行迭代性能更差,但多核情况下Stream迭代时性能较好。文章源自JAVA秀-https://www.javaxiu.com/10303.html

实验三 复杂对象归约

从实验一、二的结果来看,Stream串行执行的效果都比外部迭代差(很多),是不是说明Stream真的不行了?先别下结论,我们再来考察一下更复杂的操作。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试内容:给定订单列表,统计每个用户的总交易额。对比使用外部迭代手动实现和Stream API之间的性能。文章源自JAVA秀-https://www.javaxiu.com/10303.html

我们将订单简化为 <userName,price,timeStamp>构成的元组,并用 Order对象来表示。测试程序ReductionTest文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://github.com/CarpenterLee/JavaLambdaInternals/blob/master/perf/StreamBenchmark/src/lee/ReductionTest.java文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试结果如下图:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_5.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

分析,对于复杂的归约操作:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、Stream API的性能普遍好于外部手动迭代,并行Stream效果更佳;文章源自JAVA秀-https://www.javaxiu.com/10303.html

再来考察并行度对并行效果的影响,测试结果如下:文章源自JAVA秀-https://www.javaxiu.com/10303.html

Java8 中用法优雅的 Stream,性能也”优雅”吗?文章源自JAVA秀-https://www.javaxiu.com/10303.html

img_6.png文章源自JAVA秀-https://www.javaxiu.com/10303.html

分析,对于复杂的归约操作:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、使用Stream并行归约在单核情况下性能比串行归约以及手动归约都要差,简单说就是最差的;文章源自JAVA秀-https://www.javaxiu.com/10303.html

2、随着使用核数的增加,Stream并行效果逐渐变好,多核带来的效果明显。文章源自JAVA秀-https://www.javaxiu.com/10303.html

以上两个实验说明,对于复杂的归约操作,Stream串行归约效果好于手动归约,在多核情况下,并行归约效果更佳。我们有理由相信,对于其他复杂的操作,Stream API也能表现出相似的性能表现。文章源自JAVA秀-https://www.javaxiu.com/10303.html

结论

上述三个实验的结果可以总结如下:文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、对于简单操作,比如最简单的遍历,Stream串行API性能明显差于显示迭代,但并行的Stream API能够发挥多核特性。文章源自JAVA秀-https://www.javaxiu.com/10303.html

2、对于复杂操作,Stream串行API性能可以和手动实现的效果匹敌,在并行执行时Stream API效果远超手动实现。文章源自JAVA秀-https://www.javaxiu.com/10303.html

所以,如果出于性能考虑文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、对于简单操作推荐使用外部迭代手动实现 文章源自JAVA秀-https://www.javaxiu.com/10303.html

2、对于复杂操作,推荐使用Stream API 文章源自JAVA秀-https://www.javaxiu.com/10303.html

3、在多核情况下,推荐使用并行Stream API来发挥多核优势,文章源自JAVA秀-https://www.javaxiu.com/10303.html

4、单核情况下不建议使用并行Stream API。文章源自JAVA秀-https://www.javaxiu.com/10303.html

如果出于代码简洁性考虑,使用Stream API能够写出更短的代码。即使是从性能方面说,尽可能的使用Stream API也另外一个优势,那就是只要Java Stream类库做了升级优化,代码不用做任何修改就能享受到升级带来的好处。文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试所用代码在这里文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://github.com/CarpenterLee/JavaLambdaInternals/blob/master/perf/StreamBenchmark/src/lee文章源自JAVA秀-https://www.javaxiu.com/10303.html

测试结果汇总文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://github.com/CarpenterLee/JavaLambdaInternals/blob/master/perf/Stream_performance.xlsx文章源自JAVA秀-https://www.javaxiu.com/10303.html

作者:CarpenterLee文章源自JAVA秀-https://www.javaxiu.com/10303.html

https://dwz.cn/pSW0u0Qr文章源自JAVA秀-https://www.javaxiu.com/10303.html

近期技术热文文章源自JAVA秀-https://www.javaxiu.com/10303.html

1、Spring 的 Controller 是单例还是多例?安全吗2、面试官:Redis新版本开始引入多线程,性能爆炸3、又发现一款牛逼的 API 敏捷开发工具4、让SpringBoot不需要Controller、Service...文章源自JAVA秀-https://www.javaxiu.com/10303.html

第3版:互联网大厂面试题文章源自JAVA秀-https://www.javaxiu.com/10303.html

包括 Java 集合、JVM、多线程、并发编程、设计模式、算法调优、Spring全家桶、Java、MyBatis、ZooKeeper、Dubbo、Elasticsearch、Memcached、MongoDB、Redis、MySQL、RabbitMQ、Kafka、Linux、Netty、Tomcat、Python、HTML、CSS、Vue、React、JavaScript、Android 大数据、阿里巴巴等大厂面试题等、等技术栈!文章源自JAVA秀-https://www.javaxiu.com/10303.html

阅读原文: 高清 7701页大厂面试题  PDF文章源自JAVA秀-https://www.javaxiu.com/10303.html

阅读原文文章源自JAVA秀-https://www.javaxiu.com/10303.html

继续阅读
速蛙云 - 极致体验,强烈推荐!!!购买套餐就免费送各大视频网站会员!快速稳定、独家福利社、流媒体稳定解锁!速度快,全球上网、视频、游戏加速、独立IP均支持!基础套餐性价比很高!这里不多说,我一直正在使用,推荐购买:https://www.javaxiu.com/59919.html
weinxin
资源分享QQ群
本站是JAVA秀团队的技术分享社区, 会经常分享资源和教程; 分享的时代, 请别再沉默!
沙海
匿名

发表评论

匿名网友 填写信息

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

确定