Azure Data Lake存储和具有WebJob/Azure功能的Azure SQL

Azure Data Lake存储和具有WebJob/Azure功能的Azure SQL,azure,azure-webjobs,azure-functions,azure-data-lake,Azure,Azure Webjobs,Azure Functions,Azure Data Lake,我需要将WEB API响应文件上载到Azure Data Lake。 然后我必须将这些文件转储到Azure SQL表中 以上两个过程必须按小时计划执行。 我应该使用Azure Web作业还是Azure函数。如果您在消费计划中运行Azure函数,函数调用必须在5分钟内完成,这对于大数据集来说可能不够 对于rest,函数和Web作业与您的场景类似。函数实际上是在Web作业之上运行的。如果您不需要任何高级功能(例如绑定),我会去找一份工作。Azure Data Factory可能是驱动此循环管道的更好

我需要将WEB API响应文件上载到Azure Data Lake。 然后我必须将这些文件转储到Azure SQL表中

以上两个过程必须按小时计划执行。
我应该使用Azure Web作业还是Azure函数。

如果您在消费计划中运行Azure函数,函数调用必须在5分钟内完成,这对于大数据集来说可能不够


对于rest,函数和Web作业与您的场景类似。函数实际上是在Web作业之上运行的。如果您不需要任何高级功能(例如绑定),我会去找一份工作。

Azure Data Factory可能是驱动此循环管道的更好机制。这里有更多细节


使用Data Factory提取Web API数据并复制到Data Lake Store如何。。?