Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop 有时,萨齐的工作失败了_Hadoop_Mapreduce_Oozie - Fatal编程技术网

Hadoop 有时,萨齐的工作失败了

Hadoop 有时,萨齐的工作失败了,hadoop,mapreduce,oozie,Hadoop,Mapreduce,Oozie,超过工作流作业..UI 我们看到了一些作业的失败状态,但并非所有时间都是特定时间间隔的 我们在JHS日志中发现了这个错误 错误org.apache.hadoop.mapreduce.v2.hs.CachedHistoryStorage:找不到作业job_21261118783927_19353 及 这是我们在oozie日志中找到的 警告JobResourceUploader 服务器[cdh-master05.c.agilone-gcp-prod.internal]未设置作业jar文件。 可能找不

超过工作流作业..UI
我们看到了一些作业的失败状态,但并非所有时间都是特定时间间隔的

我们在JHS日志中发现了这个错误 错误org.apache.hadoop.mapreduce.v2.hs.CachedHistoryStorage:找不到作业job_21261118783927_19353

这是我们在oozie日志中找到的

警告JobResourceUploader 服务器[cdh-master05.c.agilone-gcp-prod.internal]未设置作业jar文件。 可能找不到用户类。请参阅作业或作业#setJar(字符串)。 上午10:11:11.745信息JavaActionExecutor
服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[活动\流量\默认值] 作业[0033347-210319015412417-oozie-oozi-W] 行动[0033347-210319015412417-oozie-oozi-W@campaign_history_run] 检查操作,hadoop作业ID[job_1616118783927_193569]状态 [运行]10:11:11.752上午信息操作开始命令 服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[活动\流量\默认值] 作业[0033347-210319015412417-oozie-oozi-W] 行动[0033347-210319015412417-oozie-oozi-W@campaign_history_run] [0033347-210319015412417-oozie-oozi-W@campaign_history_run]行动 状态=运行10:11:11.752 AM信息操作开始命令 服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[活动\流量\默认值] 作业[0033347-210319015412417-oozie-oozi-W] 行动[0033347-210319015412417-oozie-oozi-W@campaign_history_run] [0033347-210319015412417-oozie-oozi-W@campaign_history_run]行动 数据库更新!上午10:11:13.547警告JavaActionExecutor
服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[活动\流量\默认值] 作业[0033330-210319015412417-oozie-oozi-W] 行动[0033330-210319015412417-oozie-oozi-W@campaign_run]例外情况 检查()。消息[JA017:无法查找已启动的hadoop作业ID 与行动相关的[job_1616118783927_193520] [0033330-210319015412417-oozie-oozi-W@campaign_run].失败了 action!]org.apache.oozie.action.ActionExecutor异常:JA017:可能 未查找启动的hadoop作业ID[Job_1616118783927_193520],该ID为 与行动有关 [0033330-210319015412417-oozie-oozi-W@campaign_run]. 失败 行动!在 org.apache.oozie.action.hadoop.JavaActionExecutor.check(JavaActionExecutor.java:1507) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:182) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:56) 位于org.apache.oozie.command.XCommand.call(XCommand.java:286) org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.java:332) 在 org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.java:261) 在java.util.concurrent.FutureTask.run(FutureTask.java:266)处 org.apache.oozie.service.CallableQueueService$CallableWrapper.run(CallableQueueService.java:179) 在 java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149) 在 java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624) 在java.lang.Thread.run(Thread.java:748)10:11:13.547 AM WARN JavaActionExecutor
服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[报告\u运行器\u默认值] 作业[0033340-210319015412417-oozie-oozi-W] 行动[0033340-210319015412417-oozie-oozi-W@report_run]例外情况 检查()。消息[JA017:无法查找已启动的hadoop作业ID 与行动相关的[job_1616118783927_193528] [0033340-210319015412417-oozie-oozi-W@report_run].失败了 action!]org.apache.oozie.action.ActionExecutor异常:JA017:可能 未查找启动的hadoop作业ID[Job_1616118783927_193528],该ID为 与行动有关 [0033340-210319015412417-oozie-oozi-W@report_run]. 失败 行动!在 org.apache.oozie.action.hadoop.JavaActionExecutor.check(JavaActionExecutor.java:1507) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:182) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:56) 位于org.apache.oozie.command.XCommand.call(XCommand.java:286) org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.java:332) 在 org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.java:261) 在java.util.concurrent.FutureTask.run(FutureTask.java:266)处 org.apache.oozie.service.CallableQueueService$CallableWrapper.run(CallableQueueService.java:179) 在 java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149) 在 java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624) 在java.lang.Thread.run(Thread.java:748)10:11:13.547 AM WARN ActionCheckXCommand 服务器[cdh-master05.c.agilone-gcp-prod.internal]用户[a1user]组[-] 令牌[]应用程序[活动\流量\默认值] 作业[0033330-210319015412417-oozie-oozi-W] 行动[0033330-210319015412417-oozie-oozi-W@campaign_run]例外情况 执行check()时。错误代码[JA017],消息[JA017:无法 lookup启动了hadoop作业ID[Job_1616118783927_193520],该ID为 与行动有关 [0033330-210319015412417-oozie-oozi-W@campaign_run].失败了 action!]org.apache.oozie.action.ActionExecutor异常:JA017:可能 未查找启动的hadoop作业ID[Job_1616118783927_193520],该ID为 与行动有关 [0033330-210319015412417-oozie-oozi-W@campaign_run]. 失败 行动!在 org.apache.oozie.action.hadoop.JavaActionExecutor.check(JavaActionExecutor.java:1507) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:182) 在 org.apache.oozie.command.wf.ActionCheckXCommand.execute(ActionCheckXCommand.java:56) 位于org.apache.oozie.command.XCommand.call(XCommand.java:286) org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.java:332) 在 org.apache.oozie.service.CallableQueueService$CompositeCallable.call(CallableQueueService.jav