Awk 如何匹配图案,然后复制多行?

Awk 如何匹配图案,然后复制多行?,awk,ksh,Awk,Ksh,我有两个正在使用的文件。第一个文件是我必须搜索的主数据库文件。第二个文件是我可以创建的一个文件,它允许我从主数据库中命名要提取的项目。我已经设法制作了一个AWK解决方案,它将搜索主数据库并提取与第二个文件匹配的精确行。但是,我不知道如何将匹配后的行复制到新文件中 主数据库如下所示: 40005X/50005/60005/3/10/9/ 10038A/20038/30038/0/5/23./XXXX/ 10039A/20039/30039/0/5/23./XXXX/ 10040A/20040/

我有两个正在使用的文件。第一个文件是我必须搜索的主数据库文件。第二个文件是我可以创建的一个文件,它允许我从主数据库中命名要提取的项目。我已经设法制作了一个AWK解决方案,它将搜索主数据库并提取与第二个文件匹配的精确行。但是,我不知道如何将匹配后的行复制到新文件中

主数据库如下所示:

40005X/50005/60005/3/10/9/  
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40006X/50006/60006/3/10/3/
10047A/20047/30047/0/5/23./XXXX/
10048A/20048/30048/0/5/23./XXXX/
10049A/20049/30049/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
40009X/50009/60009/3/10/3/
10054A/20054/30054/0/5/23./XXXX/
10055A/20055/30055/0/5/23./XXXX/
10056A/20056/30056/0/5/23./XXXX/
40010X/50010/60010/3/10/3/
10057A/20057/30057/0/5/23./XXXX/
10058A/20058/30058/0/5/23./XXXX/
10059A/20059/30059/0/5/23./XXXX/
40005X
40007X
40008X
40005X/50005/60005/3/10/9/
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
在我的示例中,以4000开头的行是我匹配的第一行。那一行的最后一个数字告诉我要复制多少行。因此,在第一行中,
40005X/50005/60005/3/10/9/
,我将匹配40005X,该行中的9告诉我,下面有9行需要复制

第二个文件非常简单,如下所示:

40005X/50005/60005/3/10/9/  
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40006X/50006/60006/3/10/3/
10047A/20047/30047/0/5/23./XXXX/
10048A/20048/30048/0/5/23./XXXX/
10049A/20049/30049/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
40009X/50009/60009/3/10/3/
10054A/20054/30054/0/5/23./XXXX/
10055A/20055/30055/0/5/23./XXXX/
10056A/20056/30056/0/5/23./XXXX/
40010X/50010/60010/3/10/3/
10057A/20057/30057/0/5/23./XXXX/
10058A/20058/30058/0/5/23./XXXX/
10059A/20059/30059/0/5/23./XXXX/
40005X
40007X
40008X
40005X/50005/60005/3/10/9/
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
当脚本找到每个匹配项时,我想将信息从第一个文件移动到一个新文件中进行分析。最终结果如下所示:

40005X/50005/60005/3/10/9/  
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40006X/50006/60006/3/10/3/
10047A/20047/30047/0/5/23./XXXX/
10048A/20048/30048/0/5/23./XXXX/
10049A/20049/30049/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
40009X/50009/60009/3/10/3/
10054A/20054/30054/0/5/23./XXXX/
10055A/20055/30055/0/5/23./XXXX/
10056A/20056/30056/0/5/23./XXXX/
40010X/50010/60010/3/10/3/
10057A/20057/30057/0/5/23./XXXX/
10058A/20058/30058/0/5/23./XXXX/
10059A/20059/30059/0/5/23./XXXX/
40005X
40007X
40008X
40005X/50005/60005/3/10/9/
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
我目前拥有的与第一行匹配的代码如下:

#! /bin/ksh

file1=input_file
file2=input_masterdb
file3=output_test

awk -F'/' 'NR==FNR {id[$1]; next} $1 in id' $file1 $file2 > $file3
我在AWK方面取得了最大的成功,但是我愿意接受任何建议。但是,我正在UNIX系统上进行这项工作。我想把它保留为KSH脚本,因为我使用的大多数其他脚本都是以这种格式编写的,我对它最为熟悉


谢谢你的帮助

请您尝试使用GNU
awk
中显示的样本编写并测试以下内容。考虑到您想要打印从数字X开始的行。其中,根据OP的问题,Input_file2是只有ID的文件,Input_file1是主文件

awk '
{
  sub(/ +$/,"")
}
FNR==NR{
  a[$0]
  next
}
/^[0-9]+X/{
  match($0,/[0-9]+\/$/)
  no_of_lines_to_print=substr($0,RSTART,RLENGTH-1)
  found=count=""
}
{
  if(count==no_of_lines_to_print){  count=found=""  }
  for(i in a){
    if(match($0,i)){
      found=1
      print
      next
    }
  }
}
found{
  ++count
}
count<=no_of_lines_to_print && count!=""
' Input_file2  Input_file1
awk'
{
子(/+$/,“”)
}
FNR==NR{
a[$0]
下一个
}
/^[0-9]+X/{
匹配($0,/[0-9]+\/$/)
无打印行数=substr($0,RSTART,RLENGTH-1)
found=count=“”
}
{
如果(count==没有要打印的行数){count=found=”“}
为了(我在a){
如果(匹配($0,i)){
发现=1
打印
下一个
}
}
}
发现{
++计数
}

count您现有的
awk
与ids文件中的行正确匹配,您现在需要添加一个条件,以便在读取匹配行的最后一个字段后提前打印N行。因此,我们将变量
p
设置为要打印的行数加上一行(当前行数),并减少每行打印

awk -F'/' 'NR==FNR{id[$0]; next} $1 in id{p=$6+1} p-->0{print}' file1 file2
或者与上一个条件相同,更“令人难受”(埃德·莫顿),涵盖了任何可能的极端情况下的巨大文件

awk -F'/' 'NR==FNR{id[$0]; next} $1 in id{p=$6+1} p&&p--' file1 file2
这里省略了
打印
条件,因为这是默认操作,只要递减
p
为正,则该条件再次为真。

另一个条件

$ awk -F/ 'NR==FNR       {a[$1]; next} 
           !n && $1 in a {n=$(NF-1)+1} 
           n&&n--' file2 file1

40005X/50005/60005/3/10/9/
10038A/20038/30038/0/5/23./XXXX/
10039A/20039/30039/0/5/23./XXXX/
10040A/20040/30040/0/5/23./XXXX/
10041A/20041/30041/0/5/23./XXXX/
10042A/20042/30042/0/5/23./XXXX/
10043A/20043/30043/0/5/23./XXXX/
10044A/20044/30044/0/5/23./XXXX/
10045A/20045/30045/0/5/23./XXXX/
10046A/20046/30046/0/5/23./XXXX/
40007X/50007/60007/3/10/3/
10050A/20050/30050/0/5/23./XXXX/
10051A/20051/30051/0/5/23./XXXX/
10052A/20052/30052/0/5/23./XXXX/
40008X/50008/60008/3/10/1/
10053A/20053/30053/0/5/23./XXXX/
如果任何内容行与给定的ID匹配,则需要注意。这将仅在指定的打印行数之后查找另一个id