Amazon ec2 Spark EC-2部署错误:由于群集计划程序出错而退出:所有主机均无响应!放弃

Amazon ec2 Spark EC-2部署错误:由于群集计划程序出错而退出:所有主机均无响应!放弃,amazon-ec2,apache-spark,Amazon Ec2,Apache Spark,关于在独立的EC-2集群上部署spark应用程序,我有一个问题。我遵循Spark ans的教程,成功地部署了一个独立的EC-2集群。我通过连接到clusrer UI并确保一切都如预期的那样来验证这一点。我开发了一个简单的应用程序,并在本地进行了测试。一切正常。当我将它提交到集群时,只是将-master local[4]更改为-masersspark://.... 我收到以下错误:错误TaskSchedulerImpl:由于群集计划程序出错而退出:所有主机都没有响应!放弃。有人知道如何克服这个问

关于在独立的EC-2集群上部署spark应用程序,我有一个问题。我遵循Spark ans的教程,成功地部署了一个独立的EC-2集群。我通过连接到clusrer UI并确保一切都如预期的那样来验证这一点。我开发了一个简单的应用程序,并在本地进行了测试。一切正常。当我将它提交到集群时,只是将-master local[4]更改为-masersspark://.... 我收到以下错误:错误TaskSchedulerImpl:由于群集计划程序出错而退出:所有主机都没有响应!放弃。有人知道如何克服这个问题吗。我的部署模式是客户端

确保您已向主机提供了正确的url

基本上,当您连接到Web UI时,页面上会显示确切的spark master URL

页面上的URL类似于:Spark Master atspark://IPAddress:port


另外,您可能会注意到web UI和Spark运行端口号可能不同

您好,我已经找出了问题所在。。。我得到这个错误是因为安全规则中不允许TCP。这就是为什么我无法连接到主机。我添加了TCP入站和出站安全规则。成功了。然而,在我的特殊情况下,我面临更多的错误,因为我使用了独立集群不支持的集群模式进行部署。