Hadoop 如何使用AWS自动缩放功能使用1个主节点和2个核心节点缩放AWS EMR群集?有办法吗?

Hadoop 如何使用AWS自动缩放功能使用1个主节点和2个核心节点缩放AWS EMR群集?有办法吗?,hadoop,amazon-web-services,amazon-emr,hadoop2,Hadoop,Amazon Web Services,Amazon Emr,Hadoop2,我已经使用AWS EMR实现了一个集群。我有一个主ndoe,有两个核心节点,具有hadoop引导操作。现在,我想使用自动缩放,并根据cpu阈值和其他一些约束动态调整集群大小。但是,我不知道,因为web上没有太多关于如何在现有集群上使用自动缩放的信息。任何帮助。当前,您无法在自动缩放组中启动EMR群集。但是,您可以通过将CloudWatch警报通知发送到SQS队列和使用AWS CLI或SDK修改集群的队列中的脚本来实现一个非常类似的目标。可以尝试这样做。但这应该是困难的。谢谢,不是真的。。。请看:

我已经使用AWS EMR实现了一个集群。我有一个主ndoe,有两个核心节点,具有hadoop引导操作。现在,我想使用自动缩放,并根据cpu阈值和其他一些约束动态调整集群大小。但是,我不知道,因为web上没有太多关于如何在现有集群上使用自动缩放的信息。任何帮助。

当前,您无法在自动缩放组中启动EMR群集。但是,您可以通过将CloudWatch警报通知发送到SQS队列和使用AWS CLI或SDK修改集群的队列中的脚本来实现一个非常类似的目标。

可以尝试这样做。但这应该是困难的。谢谢,不是真的。。。请看:发现这样做很困难。我想更好的方法是在EMR上使用spot实例。我们如何在SQS队列中放置阈值违约通知?