Hadoop 如何并行执行多个PIG脚本;?
我有多个PIG脚本,目前我正在使用命令PIG-x mapreduce/path/to/Script/Script1.PIG&&/path/to/Script/Script2.PIG&&/path/to/Script/Script3.PIG以顺序方式执行它 现在,我希望并行执行这些脚本,以提高性能,因为它们彼此独立。我试图寻找它,但没有得到确切的答案Hadoop 如何并行执行多个PIG脚本;?,hadoop,apache-pig,Hadoop,Apache Pig,我有多个PIG脚本,目前我正在使用命令PIG-x mapreduce/path/to/Script/Script1.PIG&&/path/to/Script/Script2.PIG&&/path/to/Script/Script3.PIG以顺序方式执行它 现在,我希望并行执行这些脚本,以提高性能,因为它们彼此独立。我试图寻找它,但没有得到确切的答案 那么,有什么方法可以并行执行所有PIG脚本吗?您应该能够使用ApacheOozie您应该能够使用ApacheOozie #!/bin/bash p
那么,有什么方法可以并行执行所有PIG脚本吗?您应该能够使用ApacheOozie您应该能够使用ApacheOozie
#!/bin/bash
pig -x mapreduce /path/to/Script/Script1.pig &
pig -x mapreduce /path/to/Script/Script2.pig &
pig -x mapreduce /path/to/Script/Script3.pig &
wait
echo "Done!"