Java scala中的并行流_Java_Scala

Java scala中的并行流

java scala

Java scala中的并行流,java,scala,Java,Scala,有没有（希望是现成的）方法来并行遍历Scala流例如，请参见以下java 8代码： String[] s = {"a","b","c","d","e"}; List<String> list = Arrays.asList(s); list.parallelStream().forEach(System.out::println); 将输出如下内容： 1过滤器a 1过滤器b 2过滤器->b 1过滤器c 1过滤器d 2过滤器->d 另一方面，下面的代码将分块处理数据。在每次转换时将

有没有（希望是现成的）方法来并行遍历Scala流

例如，请参见以下java 8代码：

String[] s = {"a","b","c","d","e"};
List<String> list = Arrays.asList(s);
list.parallelStream().forEach(System.out::println);

将输出如下内容：

1过滤器a

1过滤器b

2过滤器->b

1过滤器c

1过滤器d

2过滤器->d

另一方面，下面的代码将分块处理数据。在每次转换时将变量保留在内存中：

  "abcd".toVector.par.filter { x => 
  println(s"1 filter $x")  
   if(x.toInt%2==0) true;else false;
  } //end of first block
  .foreach { x => 
  println(s"2 filter->$x")  
  } //end of second block

输出： 1过滤器c

1过滤器a

1过滤器b

1过滤器d

2过滤器->b

2过滤器->d

您可以使用

你可以用

许多（大多数？）Scala集合都有一个

par

方法，该方法“返回此集合的并行实现”

从ScalaDocs：

对于大多数集合类型，此方法通过复制所有元素来创建新的并行集合。对于这些集合，

par

需要线性时间

Scala

Stream[]

没有直接的并行实现，因此您得到的是

ParSeq[]

，并且由于

ParSeq

是一种特性，REPL将它实例化为

ParVector

scala> Stream("a","b","c","d","e").par
res0: scala.collection.parallel.immutable.ParSeq[String] = ParVector(a, b, c, d, e)

同样值得注意的是ScalaDocs中的其他信息：

传递给某些操作的高阶函数可能包含副作用。由于批量操作的实现可能不是连续的，这意味着副作用可能是不可预测的，如果不小心，可能会产生数据争用、死锁或状态无效。在访问可变数据时，程序员要么避免使用副作用，要么使用某种形式的同步

因此，您的

foreach（println）

代码可能会产生不可预测/不希望的结果。