Apache spark spark-ec2从spark-1.4安装的aws cli已过期
我使用spark 1.4和spark-ec2发布了按需spark群集。然后我登录到集群,发现aws客户机很古老Apache spark spark-ec2从spark-1.4安装的aws cli已过期,apache-spark,aws-cli,spark-ec2,Apache Spark,Aws Cli,Spark Ec2,我使用spark 1.4和spark-ec2发布了按需spark群集。然后我登录到集群,发现aws客户机很古老 aws --version aws-cli/0.8.2 Python/2.6.9 Linux/3.4.37-40.44.amzn1.x86_64 在我的本地,aws客户端是 aws --version aws-cli/1.3.24 Python/2.7.7 Linux/2.6.32-431.el6.x86_64 spark-ec2安装的aws版本非常旧,使用了完全不同的语法。我希望
aws --version
aws-cli/0.8.2 Python/2.6.9 Linux/3.4.37-40.44.amzn1.x86_64
在我的本地,aws客户端是
aws --version
aws-cli/1.3.24 Python/2.7.7 Linux/2.6.32-431.el6.x86_64
spark-ec2安装的aws版本非常旧,使用了完全不同的语法。我希望能够使用符号:
aws s3 cp src target
但是我得到了这个错误:
$ aws s3 cp src tgt
usage: aws s3 operation
aws s3: error: argument operation: invalid choice: 'cp' (choose from u'list- object-versions', u'put-bucket-policy', u'list-objects', u'put-bucket-website', u'put-bucket-notification', u'put-bucket-logging', u'upload-part', u'put-object', u'delete-bucket-cors', u'put-bucket-versioning', u'get-bucket-cors', u'put-bucket-lifecycle', u'get-bucket-acl', u'get-bucket-logging', u'head-bucket', u'put-bucket-acl', u'delete-bucket-website', u'delete-bucket-policy', u'delete-objects', u'get-object', u'copy-object', u'list-buckets', u'put-bucket-request-payment', u'head-object', u'delete-bucket-tagging', u'get-object-torrent', u'get-bucket-lifecycle', u'create-bucket', u'complete-multipart-upload', u'get-bucket-website', u'create-multipart-upload', u'delete-bucket', u'get-bucket-policy', u'get-bucket-versioning', u'list-multipart-uploads', u'get-bucket-request-payment', u'put-bucket-tagging', u'get-bucket-tagging', u'abort-multipart-upload', u'put-object-acl', u'get-bucket-location', u'put-bucket-cors', u'delete-bucket-lifecycle', u'get-bucket-notification', u'list-parts', u'get-object-acl', u'upload-part-copy', u'delete-object', u'restore-object', 'help')
是否有安装AWS CLI最新版本的已更新AMI?为什么不更新群集上的CLI版本?没有更多关于aws cli/0.8.2版本的文档更改ec2脚本并提交更改。谢谢。我已经在我的AMI上更新了CLI,一切都很好。我将对spark社区进行全面的研究。为什么不更新集群上的cli版本?没有更多关于aws cli/0.8.2版本的文档更改ec2脚本并提交更改。谢谢。我已经在我的AMI上更新了CLI,一切都很好。我将研究为spark社区做这件事。