Azure data factory 从Azure数据工厂运行可执行文件时Azure批处理池中的节点数

Azure data factory 从Azure数据工厂运行可执行文件时Azure批处理池中的节点数,azure-data-factory,azure-batch,Azure Data Factory,Azure Batch,我们有一个ADF管道,它运行另外3个管道,这些管道使用相同的Azure批处理池运行相同的可执行文件。大多数情况下,可执行文件都会成功运行。但是,在某些情况下,管道在开始运行可执行文件之前会挂起 请注意,所有3个管道都使用相同的Azure批处理池 可执行文件没有任何并行性,因此节点的数量是否会产生差异?应该至少有3个节点吗 使用同一Azure批处理池的管道是否存在问题?他们应该使用不同的池吗 谢谢 Mehmet我可能会尝试从我的批处理中回答两个问题:(我希望这能让您了解如何进行一些调试以深入识

我们有一个ADF管道,它运行另外3个管道,这些管道使用相同的Azure批处理池运行相同的可执行文件。大多数情况下,可执行文件都会成功运行。但是,在某些情况下,管道在开始运行可执行文件之前会挂起

请注意,所有3个管道都使用相同的Azure批处理池

  • 可执行文件没有任何并行性,因此节点的数量是否会产生差异?应该至少有3个节点吗

  • 使用同一Azure批处理池的管道是否存在问题?他们应该使用不同的池吗

谢谢


Mehmet

我可能会尝试从我的
批处理中回答两个问题:(我希望这能让您了解如何进行一些调试以深入识别)

  • 可执行文件没有任何并行性,因此节点的数量是否会产生差异?应该至少有3个节点吗

    • 不,节点数不受批处理中任何并行概念的限制。好的,我不确定从哪里提到了3个节点,但是有了3个节点,您的场景是否正常工作
    • 错误处理:只要概念代码得到良好管理,如果
      BatchException
      FailureInfo
      中存在任何异常,则会为用户推送批内错误。e、 g.或
    • 从节点中,您始终可以获得服务日志:
    • 并行任务挂起时的节点状态是什么
  • 使用同一Azure批处理池的管道是否存在问题?他们应该使用不同的池吗

    • 不,好的。如果您看到任何具体情况,我建议您详细说明您的场景
由于其代码节点正在尝试运行,我建议设置调试点并检查服务日志,以识别用户代码运行行为

谢谢