Apache flink 为什么当我在ApacheFlink中只运行一个作业时,会在TaskManager中看到几个已完成的作业?

Apache flink 为什么当我在ApacheFlink中只运行一个作业时,会在TaskManager中看到几个已完成的作业?,apache-flink,Apache Flink,在ApacheFlink中,我在远程集群上运行任务。我有一个包含以下命令的任务。 我想知道,为什么弗林克Web客户端把我的任务看作完成任务中的几个不同的工作? personRecords = env.readCsvFile("path to input file/dataset1.csv") .lineDelimiter("\n").ignoreFirstLine() .fieldDelimiter(",")

在ApacheFlink中,我在远程集群上运行任务。我有一个包含以下命令的任务。 我想知道,为什么弗林克Web客户端把我的任务看作完成任务中的几个不同的工作?

personRecords =    env.readCsvFile("path to input file/dataset1.csv")
                .lineDelimiter("\n").ignoreFirstLine()
                .fieldDelimiter(",")           
                .includeFields("111")
                .types(Integer.class, String.class, String.class);

pData = personRecords.map(new cleanerMap());
pData = pData.sortPartition(3, Order.ASCENDING).setParallelism(1);
env.setParallelism(4);
MultiKey_List = partitionedData.collect();
...
pData = p.partitionCustom(new MyPartitioner(), 3);
DataSet<Tuple2<Integer, Integer>> dPairs =    pData.mapPartition(new  Calc());
dPairs = dPairs.flatMap(new TC(dPairs.collect())).setParallelism(1);
env.execute();
personRecords=env.readCsvFile(“输入文件路径/dataset1.csv”)
.lineDelimiter(“\n”).ignoreFirstLine()
.fieldDelimiter(“,”)
.includefelds(“111”)
.类型(Integer.class、String.class、String.class);
pData=personRecords.map(新的cleanerMap());
pData=pData.sortPartition(3,顺序。升序)。setParallelism(1);
环境署署长(4);
MultiKey_List=partitionedData.collect();
...
pData=p.partitionCustom(新的MyPartitioner(),3);
数据集dPairs=pData.mapPartition(new Calc());
dPairs=dPairs.flatMap(新TC(dPairs.collect()).setParallelism(1);
execute();

这是因为
collect
命令会触发作业的执行,直到调用作业为止。因此,它不同于几乎所有其他迫切需要评估的api调用。触发作业执行的另一种方法是
count


collect
之后定义的所有其他接收器将由后续的
collect
调用或调用
ExecutionEnvironment时执行。execute

那么您的意思是,在这种情况下,我将有3个作业,因为我有2个collect命令和1个execute命令?是的,在这种情况下,您应该看到三个作业。