Hadoop 使用色调与Oozie一起运行Shell命令

Hadoop 使用色调与Oozie一起运行Shell命令,hadoop,oozie,hue,Hadoop,Oozie,Hue,我正在尝试运行一个简单的shell脚本,该脚本包含以下内容: spark-submit –class org.apache.spark.examples.SparkPi –master yarn-client /cloudera/opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/lib/spark/lib/spark-examples.jar 100 在shell命令中,我编写script.sh,然后从HDFS目录添加文件“script.sh” lo

我正在尝试运行一个简单的shell脚本,该脚本包含以下内容:

spark-submit –class org.apache.spark.examples.SparkPi –master yarn-client /cloudera/opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/lib/spark/lib/spark-examples.jar 100
在shell命令中,我编写script.sh,然后从HDFS目录添加文件“script.sh”

log4j:警告:找不到记录器的附加器 (org.apache.hadoop.mapreduce.v2.app.MRAppMaster)。log4j:请警告 正确初始化log4j系统。log4j:请参阅 更多信息


如果您能提供帮助,请原谅。

这不是错误-这只是一个log4j警告。但我的脚本在此之后终止。执行没有开始。看看Oozie启动器的日志,它们应该有显示命令结果的日志。这不是错误,只是一个log4j警告。但是我的脚本在此之后终止。执行没有开始。看看Oozie启动器的日志,它们应该有显示命令结果的日志。