Linux 以增量方式在一组文件上实现bash脚本

对不起，如果这是一个基本的问题，但我刚刚开始，我有点迷路了。我有一组大约3000个文件，我想在这些文件上运行命令。不幸的是，该命令所来自的程序（morphanderer）一次只能在8个文件上运行。这些文件是连续编号的。如何使程序在每8个文件上迭代一次，以便处理文件夹中的所有文件？

假设您的文件被称为

file01

，

file02

…

file64

，然后您可以使用

GNU Parallel

这样处理它们：

parallel -j 1 -n 8 echo {1} {2} {3} {4} {5} {6} {7} {8} ::: file*

结果是：

file001 file002 file003 file004 file005 file006 file007 file008
file009 file010 file011 file012 file013 file014 file015 file016
file017 file018 file019 file020 file021 file022 file023 file024
file025 file026 file027 file028 file029 file030 file031 file032
file033 file034 file035 file036 file037 file038 file039 file040
file041 file042 file043 file044 file045 file046 file047 file048
file049 file050 file051 file052 file053 file054 file055 file056
file057 file058 file059 file060 file061 file062 file063 file064

当然，我只是回显参数，您可能会调用

morphander

-j1

表示一次只运行一个

morphadorner

——如果您有8个CPU内核，您可能希望忽略这一点，并允许一次运行8个

morphadorner

-n8

表示一次使用8个参数/文件

{1}

是第一个参数的占位符，

{2}

是第二个参数的占位符，依此类推

---

：

是一个分隔符，它告诉

GNU Parallel

，参数将要跟随。

看看下面的代码：

    files=(*)
    count=${#files[@]}
    limit=8
    echo "Processing $count files: ${files[@]}"

    while [ $count -gt 0 ] ; do
            count=$((count-8))
            [ $count -lt 0 ] && limit=$((limit+count)) && count=0
            part=("${files[@]:$count:$limit}")
            echo $count-$((count+limit)): "${part[@]}"
    done