Apache spark alluxio未在群集中分发文件
我正在为alluxio（1.4版）使用6节点集群，但它不在集群中分发文件，一个工作线程仅使用98%，另一个工作线程使用50%-55% 仅使用18%的主节点Apache spark alluxio未在群集中分发文件,apache-spark,alluxio,Apache Spark,Alluxio,我正在为alluxio（1.4版）使用6节点集群，但它不在集群中分发文件，一个工作线程仅使用98%，另一个工作线程使用50%-55% 仅使用18%的主节点 我在所有节点的alluxio-site.properties文件中使用“alluxio.user.file.write.location.policy.class=alluxio.client.file.policy.MostAvailableFirstPolicy”。类是客户端属性。要使其生效，它必须位于将数据写入Alluxio的应用程序的
我在所有节点的alluxio-site.properties文件中使用“alluxio.user.file.write.location.policy.class=alluxio.client.file.policy.MostAvailableFirstPolicy”。类是客户端属性。要使其生效，它必须位于将数据写入Alluxio的应用程序的类路径上。还请注意，该策略仅适用于新写入的文件，因此现有数据不会被主动重新平衡