Spotify 无法使用luigi运行mapreduce
我是一个新的地图减少工作。可能是一些基本的问题,但现有的文件没有帮助我。 如何使用luigi运行mapreduce作业。例如wordcount_hadoop.py启动作业需要传递哪些参数Spotify 无法使用luigi运行mapreduce,spotify,hadoop-streaming,Spotify,Hadoop Streaming,我是一个新的地图减少工作。可能是一些基本的问题,但现有的文件没有帮助我。 如何使用luigi运行mapreduce作业。例如wordcount_hadoop.py启动作业需要传递哪些参数 python examples/wordcount_hadoop.py --date-interval 2012-06-01 输出: usage: wordcount_hadoop.py [-h] [--scheduler-port SCHEDULER_PORT] [--lock]
python examples/wordcount_hadoop.py --date-interval 2012-06-01
输出:
usage: wordcount_hadoop.py [-h] [--scheduler-port SCHEDULER_PORT] [--lock]
[--workers WORKERS] [--lock-pid-dir LOCK_PID_DIR]
[--scheduler-host SCHEDULER_HOST]
[--local-scheduler] [--pool POOL]
{BaseHadoopJobTask,EnvironmentParamsContainer,JobTask,Task,WordCount,WrapperTask} ...
wordcount_hadoop.py: error: argument {BaseHadoopJobTask,EnvironmentParamsContainer,JobTask,Task,WordCount,WrapperTask}: invalid choice: '2012-07' (choose from 'JobTask', 'Task', 'WrapperTask', 'WordCount', 'EnvironmentParamsContainer', 'BaseHadoopJobTask')
您需要在命令中输入任务名称 例如:
python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01
您需要在命令中输入任务名称
例如:
python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01
您需要在命令中输入任务名称
例如:
python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01
您需要在命令中输入任务名称
例如:
python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01
@user2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)