Java 当被cron调用时，Hadoop作业失败
我创建了以下用于调用hadoop作业的shell脚本：Java 当被cron调用时，Hadoop作业失败,java,shell,cron,hadoop,Java,Shell,Cron,Hadoop,我创建了以下用于调用hadoop作业的shell脚本： #!/bin/bash /opt/hadoop/bin/hadoop jar /path/to/job.jar com.do.something <param-1> ... <param-n> & wait %1 STATUS=$? if [ $STATUS -eq 0 ] then echo "SUCCESS" | mailx -s "Status: "$STATUS -r "mail@my
#!/bin/bash
/opt/hadoop/bin/hadoop jar /path/to/job.jar com.do.something <param-1> ... <param-n> &
wait %1
STATUS=$?
if [ $STATUS -eq 0 ]
then
echo "SUCCESS" | mailx -s "Status: "$STATUS -r "mail@mysite.com" "mail@mysite.com"
exit $STATUS
else
echo "FAILED" | mailx -s "Status: "$STATUS -r "mail@mysite.com" "mail@mysite.com"
exit $STATUS
fi
$ ./path/to/job.sh
0 22 * * * /path/to/job.sh
- 配置cron作业的用户帐户是UserA
- UserA也是Hadoop系统用户
- 群集专用于运行此作业
- 该脚本是可执行的
我想知道为什么在cron调用作业时作业没有运行？从cron运行的环境可能与常规shell不同。您可能需要检查，例如JAVA_HOME、PATH等。从cron运行的环境可能与常规shell不同。您可能需要检查，例如JAVA_HOME、PATH等。我也遇到了类似的问题。我已经使用$HOME/.bashrc来设置环境变量，如JAVA_HOME、HADOOP_HOME和PATH。我也可以手动运行我的job.sh。但是当cron调用job.sh时，job.sh中与hadoop相关的命令无法正确调用
造成我的问题的原因是cron不会提供$HOME/.bashrc的源代码。所以cron无法看到它内部的环境变量。在job.sh中设置所有这些环境变量后，cron会正确调用与hadoop相关的命令。我也遇到了类似的问题。我已经使用$HOME/.bashrc来设置环境变量，如JAVA_HOME、HADOOP_HOME和PATH。我也可以手动运行我的job.sh。但是当cron调用job.sh时，job.sh中与hadoop相关的命令无法正确调用
0 22 * * * /path/to/job.sh
0 22 * * * /path/to/job.sh
“0 22 * * * ./path/to/job.sh
“0 22 * * * ./path/to/job.sh
它能工作吗？如果在/etc/profile中设置JAVA\u HOME和HADOOP\u HOME。加 /等/简介
在你的工作中。如果您在/etc/profile中设置JAVA\u HOME和HADOOP\u HOME，这将有所帮助。。加 /等/简介
在你的工作中。这将有所帮助。在job.sh中设置JAVA\u HOME、HADOOP\u HOME后，然后： 0 22***sh-x$HOME/path/to/job.sh>$HOME/job.log 2>&1
在job.sh中设置JAVA\u HOME、HADOOP\u HOME之后，查看job.log中的内容，然后： 0 22***sh-x$HOME/path/to/job.sh>$HOME/job.log 2>&1
查看您的作业中的内容。日志
croncroncroncron