Azure数据工厂-Python自定义活动

Azure数据工厂-Python自定义活动,azure,azure-data-factory,Azure,Azure Data Factory,我正在尝试使用Python自定义活动(类似于.Net)创建一个数据工厂,以从源文件中提取数据并对其进行一些预处理。数据预处理后,需要将文件上载到blob。我已经准备好了一个python代码来实现这一点,但我想探索一下是否可以通过向Data Factory中注入python代码来使用Data Factory自定义活动来实现这一点。如果是,请告诉我怎么做,链接或任何参考文档都会有所帮助 感谢您在这方面的想法。您可以使用ADF V2自定义活动来实现这一点,这里的文档应在批处理池(由自定义活动引用)级别

我正在尝试使用Python自定义活动(类似于.Net)创建一个数据工厂,以从源文件中提取数据并对其进行一些预处理。数据预处理后,需要将文件上载到blob。我已经准备好了一个python代码来实现这一点,但我想探索一下是否可以通过向Data Factory中注入python代码来使用Data Factory自定义活动来实现这一点。如果是,请告诉我怎么做,链接或任何参考文档都会有所帮助


感谢您在这方面的想法。

您可以使用ADF V2自定义活动来实现这一点,这里的文档应在批处理池(由自定义活动引用)级别安装依赖项。在批处理池上安装依赖项有两种方法:使用池启动脚本docs.microsoft.com/en-us/azure/batch/…或自定义映像docs.microsoft.com/en-us/azure/batch/batch自定义映像

您好,我看不到任何使用Python API的自定义活动。您能告诉我它在哪里吗?自定义活动支持运行cmd命令。所以您可以使用命令行来调用python脚本。嗨,Tong,我正在尝试通过自定义活动来使用python应用程序。我可以知道如何在使用自定义活动打电话时安装Python应用程序的依赖项吗?嗨,Nathan,你是如何实现它的?在我这边,我也必须这么做。同样的问题,你们是如何实现的?我们有一个非常类似的用例,我知道现在您可以使用Azure Databricks从ADF V2运行Python脚本,但我仍然很好奇您是如何实现自定义活动的。:)谢谢