Apache spark 执行器丢失失败:主机被抢占
由于以下错误消息,我的spark streaming应用程序(在HD Insights上运行)经常出现任务失败:Apache spark 执行器丢失失败:主机被抢占,apache-spark,spark-streaming,yarn,executor,Apache Spark,Spark Streaming,Yarn,Executor,由于以下错误消息,我的spark streaming应用程序(在HD Insights上运行)经常出现任务失败: ExecutorLostFailure (executor 525 exited unrelated to the running tasks) Reason: Container container_1495825717937_0056_01_000916 on host: 10.0.0.14 was preempted. 你知道我应该在这里做什么吗?我不清楚该如何处理此错误消息
ExecutorLostFailure (executor 525 exited unrelated to the running tasks) Reason: Container container_1495825717937_0056_01_000916 on host: 10.0.0.14 was preempted.
你知道我应该在这里做什么吗?我不清楚该如何处理此错误消息。您应该查看HDInsights(纱线)日志,因为可能更重要的应用程序请求资源,而您的应用程序得到的资源较少。