最近在使用Java8的并行流时遇到了坑,线上排查问题时花了较多时间,分享出来与大家一起学习与自查

// 此处为坑
List<Java8Demo> copy = Lists.newArrayList();
numbers.parallelStream().forEach(item -> {
copy.add(new Java8Demo(item));
});

上图用到了parallelStrem并行流,在循环内部往共享变量copy内写值,由于ArrayList本身不具备线程安全性,导致得到的copy内容有缺失。

总结经验如下:

  1. 在并行流内部不能对外部共享变量做写操作;
  2. 如有需要,使用收集器实现上述并行流,收集器在内部即使使用ArrayList,也不会造成问题!

提供两种解决方案:

  • 串行

    // stream串行
    List<Java8Demo> copy = Lists.newArrayList();
    numbers.stream().forEach(item -> {
    copy.add(new Java8Demo(item));
    });
  • 收集器
    // 并行使用收集器
    List<Java8Demo> copy = numbers.parallelStream().map(Java8Demo::new).collect(Collectors.toList());

可运行Demo.java

package acc.biz.impl;

import java.util.Arrays;
import java.util.List;
import java.util.stream.Collectors; import com.google.common.collect.Lists; public class Demo { private Integer value; public Demo(Integer value) {
this.value = value;
} public static List<Integer> numbers = Arrays.asList(0, 1, 2, 3, 4, 5, 6, 7, 8, 9); public static void main(String[] args) {
/** parallelStream并行 */
int count1 = 1;
while (count1 < 100) {
// 此处为坑
List<Demo> copy = Lists.newArrayList();
numbers.parallelStream().forEach(item -> {
copy.add(new Demo(item));
}); // 打印错误
if (copy.size() != numbers.size()) {
System.out.println(
new StringBuilder().append("parallelStream循环第").append(count1).append("次报错,numbers.size: [")
.append(numbers.size()).append("],copy.size: [").append(copy.size()).append("]"));
break;
} count1++;
} /** stream串行 */
int count2 = 1;
while (count2 < 100) {
// stream串行
List<Demo> copy = Lists.newArrayList();
numbers.stream().forEach(item -> {
copy.add(new Demo(item));
}); // 打印错误
if (copy.size() != numbers.size()) {
System.out.println(new StringBuilder().append("stream循环第").append(count2).append("次报错,numbers.size: [")
.append(numbers.size()).append("],copy.size: [").append(copy.size()).append("]"));
break;
} count2++;
} /** Collectors并行 */
int count3 = 1;
while (count3 < 100) {
// 并行使用收集器
List<Demo> copy = numbers.parallelStream().map(Demo::new).collect(Collectors.toList()); // 打印错误
if (copy.size() != numbers.size()) {
System.out.println(
new StringBuilder().append("Collectors循环第").append(count3).append("次报错,numbers.size: [")
.append(numbers.size()).append("],copy.size: [").append(copy.size()).append("]"));
break;
} count3++;
}
} public Integer getValue() {
return value;
} public void setValue(Integer value) {
this.value = value;
}
}

分享一个知识点:

Java的一个新功能静态方法指定泛型类型。

Java8 的静态泛型方法是: YourClass.<T>yourMethod();

C# 的静态泛型方法是: YourClass<T>.yourMethod();

如下的例子:

package demo;

import j.m.XList;
import j.m.XMap; public class Main { public static void main(String[] args) {
//public static final <U> XList<U> fromJSON(String json); 这是j.jar中的方法原型,
double s = XList.<XMap<String, Object>>fromJSON("[{id:1,name:'aaa',money:1000.00},{id:2,name:'bbb',money:10000.00},{id:3,name:'ccc',money:30000.00}]")
.parallelStream()
.map(x -> x.getDouble("money"))//不指定的话这里的x类型是Object
.reduce(0.0, Double::sum);//用到了并行流,不可用累加到外部变量的方式求和
System.out.println(s);//
}
}

在使用Java8并行流时的问题分析的更多相关文章

  1. Java8并行流使用注意事项

    对于从事Java开发的童鞋来说,相信对于Java8的并行流并不陌生,没错,我们常常用它来执行并行任务,但是由于并行流(parallel stream)采用的是享线程池,可能会对我们的性能造成严重影响, ...

  2. Java8新特性 并行流与串行流 Fork Join

    并行流就是把一个内容分成多个数据块,并用不同的线程分 别处理每个数据块的流. Java 8 中将并行进行了优化,我们可以很容易的对数据进行并 行操作. Stream API 可以声明性地通过 para ...

  3. java8新特性——并行流与顺序流

    在我们开发过程中,我们都知道想要提高程序效率,我们可以启用多线程去并行处理,而java8中对数据处理也提供了它得并行方法,今天就来简单学习一下java8中得并行流与顺序流. 并行流就是把一个内容分成多 ...

  4. Java8新特性 - 并行流与串行流

    并行流就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的流. Java8中将并行进行了优化,我们可以很容易的对数据进行并行操作.Stream API可以声明性地通过parallel()和 ...

  5. Java8使用并行流(ParallelStream)注意事项

    Java8并行流ParallelStream和Stream的区别就是支持并行执行,提高程序运行效率.但是如果使用不当可能会发生线程安全的问题.Demo如下: public static void co ...

  6. 三、并行流与串行流 Fork/Join框架

    一.并行流概念: 并行流就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的流. java8中将并行进行了优化,我们可以很容易的对数据进行并行操作.Stream API可以声明性的通过pa ...

  7. Tomcat 应用中并行流带来的类加载问题

    本文首发于 vivo互联网技术 微信公众号 链接:https://mp.weixin.qq.com/s/f-X3n9cvDyU5f5NYH6mhxQ作者:肖铭轩.王道环 随着 Java8 的不断流行, ...

  8. 【转】Java8 Stream 流详解

      当我第一次阅读 Java8 中的 Stream API 时,说实话,我非常困惑,因为它的名字听起来与 Java I0 框架中的 InputStream 和 OutputStream 非常类似.但是 ...

  9. java8学习之收集器枚举特性深度解析与并行流原理

    首先先来找出上一次[http://www.cnblogs.com/webor2006/p/8353314.html]在最后举的那个并行流报错的问题,如下: 在来查找出上面异常的原因之前,当然得要一点点 ...

随机推荐

  1. SQL Server双机热备之后项目的FailOver自动连接

    SQL Server配置数据库镜像后,可能有朋友们会比较有疑惑,你一下搞两个数据库出来,他们的ip地址都不一样,到时候数据库切换过去了,我的数据库的连接字符串可如何是好?难道还得在代码中去控制是连接哪 ...

  2. java课上测试心得

    放暑假之前,建民老师就给我们布置了每一天学习两小时的代码,但是自己的不重视,根本就没有达到这个要求,简单学了一点点基本的东西,然后在开学的第一堂课上,连续三个小时的敲代码,让我意识到了自己的问题,一个 ...

  3. html5的理解

    1.良好的移动性,以移动设备为主 2.响应式设计,以适应自动变化的屏幕尺寸 3.支持离线缓存技术,webStorage本地缓存 4.新增canvas.video.audio等新标签元素,新增特殊内容元 ...

  4. 怎样从外网访问内网Redis数据库?

    本地安装了一个Redis数据库,只能在局域网内访问到,怎样从外网也能访问到本地的Redis数据库呢?本文将介绍具体的实现步骤. 1. 准备工作 1.1 安装并启动Redis数据库 默认安装的Redis ...

  5. C++形参中const char * 与 char * 的区别

    在函数调用时,我们经常看见一个函数的接受参数为(const char *); 例如strlen()函数,它的定义为: size_t strlen( const char *str); 那么将形参设置为 ...

  6. MySQL SELECT练习题*28

    -- (1)用子查询查询员工“张小娟”所做的订单信息. SELECT * FROM order_master WHERE saler_no = ( SELECT employee_no FROM em ...

  7. Linux系统更改默认Python版本

    Linux 默认的Python版本为Python2.X,但是在很多时候我们需要使用Python3.X,那么我们需要更改Linux的默认Python版本,更改很简单,只需要两句话. sudo updat ...

  8. OpenJudge cdqz/Data Structure Challenge 2 (Problem 5822) - 可持久化线段树

    描述 给一个空数列,有M次操作,每次操作是以下三种之一: (1)在数列后加一个数 (2)求数列中某位置的值 (3)撤销掉最后进行的若干次操作(1和3) 输入 第一行一个正整数M. 接下来M行,每行开头 ...

  9. Python3基础 list count 查询指定元素在列表中出现了多少次

             Python : 3.7.0          OS : Ubuntu 18.04.1 LTS         IDE : PyCharm 2018.2.4       Conda ...

  10. Python3基础 filter+lambda 筛选出1-20之间的奇数

             Python : 3.7.0          OS : Ubuntu 18.04.1 LTS         IDE : PyCharm 2018.2.4       Conda ...