Warning: file_get_contents(/data/phpspider/zhask/data//catemap/6/apache/9.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache 运行小型独立任务的框架_Apache_Amazon Web Services_Workflow_Airflow - Fatal编程技术网

Apache 运行小型独立任务的框架

Apache 运行小型独立任务的框架,apache,amazon-web-services,workflow,airflow,Apache,Amazon Web Services,Workflow,Airflow,我有一个要求,我需要做以下工作 以一定的频率(每小时、每天等)从数据库中提取记录 对每个记录进行一些API调用 对于每个记录,使用新信息更新数据库 做更多的事情 记录的数量可能是巨大的。是一个可以管理此工作流的框架,其中每个任务/记录在执行过程中可能处于不同阶段 看看这张照片。有多个生产应用程序依赖Cadence,其要求与您的类似。您看过AWS步骤功能吗?“每个任务/记录在执行过程中可能处于不同阶段”听起来像是解耦。有许多方法可以实现解耦(例如,使用事件驱动体系结构)。这里有大量的框架可以推荐,

我有一个要求,我需要做以下工作

  • 以一定的频率(每小时、每天等)从数据库中提取记录
  • 对每个记录进行一些API调用
  • 对于每个记录,使用新信息更新数据库
  • 做更多的事情

  • 记录的数量可能是巨大的。是一个可以管理此工作流的框架,其中每个任务/记录在执行过程中可能处于不同阶段

    看看这张照片。有多个生产应用程序依赖Cadence,其要求与您的类似。

    您看过AWS步骤功能吗?“每个任务/记录在执行过程中可能处于不同阶段”听起来像是解耦。有许多方法可以实现解耦(例如,使用事件驱动体系结构)。这里有大量的框架可以推荐,所以这个问题可能被认为过于宽泛。