Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 火花流:如何使RDD和x27的火花分布;跨越集群_Apache Spark_Spark Streaming - Fatal编程技术网

Apache spark 火花流:如何使RDD和x27的火花分布;跨越集群

Apache spark 火花流:如何使RDD和x27的火花分布;跨越集群,apache-spark,spark-streaming,Apache Spark,Spark Streaming,我们有一个spark streaming应用程序运行在由Thread管理的集群上。我发现这个工作非常慢,而且分布不均匀 如图所示,我突出显示了一个节点,它占据了大部分rdd 从研究中发现,我们可以重新分区或使用colasace…但几乎不知道使用哪一个 如果社区中的任何专家能够提供帮助,我将不胜感激,因为我们是Spark的新手请出示您的代码我正在处理这个问题。如果你有任何进展,请告诉我。这让我很生气。是的,请分享你的代码。请出示你的代码。我有这个问题。如果你有任何进展,请告诉我。这让我很生气。是

我们有一个spark streaming应用程序运行在由Thread管理的集群上。我发现这个工作非常慢,而且分布不均匀

如图所示,我突出显示了一个节点,它占据了大部分rdd

从研究中发现,我们可以重新分区或使用colasace…但几乎不知道使用哪一个


如果社区中的任何专家能够提供帮助,我将不胜感激,因为我们是Spark的新手

请出示您的代码我正在处理这个问题。如果你有任何进展,请告诉我。这让我很生气。是的,请分享你的代码。请出示你的代码。我有这个问题。如果你有任何进展,请告诉我。这让我很生气。是的,请分享你的代码。。