Warning: file_get_contents(/data/phpspider/zhask/data//catemap/5/excel/27.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Spotify 无法使用luigi运行mapreduce_Spotify_Hadoop Streaming - Fatal编程技术网

Spotify 无法使用luigi运行mapreduce

Spotify 无法使用luigi运行mapreduce,spotify,hadoop-streaming,Spotify,Hadoop Streaming,我是一个新的地图减少工作。可能是一些基本的问题,但现有的文件没有帮助我。 如何使用luigi运行mapreduce作业。例如wordcount_hadoop.py启动作业需要传递哪些参数 python examples/wordcount_hadoop.py --date-interval 2012-06-01 输出: usage: wordcount_hadoop.py [-h] [--scheduler-port SCHEDULER_PORT] [--lock]

我是一个新的地图减少工作。可能是一些基本的问题,但现有的文件没有帮助我。 如何使用luigi运行mapreduce作业。例如wordcount_hadoop.py启动作业需要传递哪些参数

python examples/wordcount_hadoop.py --date-interval 2012-06-01
输出:

usage: wordcount_hadoop.py [-h] [--scheduler-port SCHEDULER_PORT] [--lock]
                           [--workers WORKERS] [--lock-pid-dir LOCK_PID_DIR]
                           [--scheduler-host SCHEDULER_HOST]
                           [--local-scheduler] [--pool POOL]
                                                    {BaseHadoopJobTask,EnvironmentParamsContainer,JobTask,Task,WordCount,WrapperTask}                           ...
wordcount_hadoop.py: error: argument {BaseHadoopJobTask,EnvironmentParamsContainer,JobTask,Task,WordCount,WrapperTask}: invalid choice: '2012-07' (choose from 'JobTask', 'Task', 'WrapperTask', 'WordCount', 'EnvironmentParamsContainer', 'BaseHadoopJobTask')

您需要在命令中输入任务名称

例如:


python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01

您需要在命令中输入任务名称

例如:


python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01

您需要在命令中输入任务名称

例如:


python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01

您需要在命令中输入任务名称

例如:


python示例/wordcount\u hadoop.py wordcount——日期间隔2012-06-01

@user2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)@用户2695817很高兴知道。如果这对你有效,你能接受答案吗?:)