Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/amazon-web-services/13.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon web services 如何将AWS爬虫配置导出到JSON(或类似)并签入到源代码管理?_Amazon Web Services_Web Crawler_Aws Glue - Fatal编程技术网

Amazon web services 如何将AWS爬虫配置导出到JSON(或类似)并签入到源代码管理?

Amazon web services 如何将AWS爬虫配置导出到JSON(或类似)并签入到源代码管理?,amazon-web-services,web-crawler,aws-glue,Amazon Web Services,Web Crawler,Aws Glue,我的团队在AWS Glue中开发了多个爬虫来扫描数据并对模式进行编目。我希望将这些爬虫程序检查到我们的源代码管理中,但我无法找到这样做的方法。我是否能够将爬虫导出为JSON或XML以签入该文件?您可以通过运行aws cli命令来获取JSON。例如,要获取可以运行的所有爬虫程序,请执行以下操作: aws glue get爬虫 要获取特定爬虫程序,您可以运行: aws glue get爬虫--名称

我的团队在AWS Glue中开发了多个爬虫来扫描数据并对模式进行编目。我希望将这些爬虫程序检查到我们的源代码管理中,但我无法找到这样做的方法。我是否能够将爬虫导出为JSON或XML以签入该文件?

您可以通过运行aws cli命令来获取JSON。例如,要获取可以运行的所有爬虫程序,请执行以下操作:

aws glue get爬虫

要获取特定爬虫程序,您可以运行:

aws glue get爬虫--名称