Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/amazon-web-services/14.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python 在aws胶水作业中是否必须有连接?_Python_Amazon Web Services_Aws Glue_Aws Glue Data Catalog - Fatal编程技术网

Python 在aws胶水作业中是否必须有连接?

Python 在aws胶水作业中是否必须有连接?,python,amazon-web-services,aws-glue,aws-glue-data-catalog,Python,Amazon Web Services,Aws Glue,Aws Glue Data Catalog,我的数据表在Glue元数据目录中。我需要在glue作业的python shell脚本中使用这些数据。当我创建粘合作业时,它最后给了我选择连接类型的选项。是否必须添加连接?如果表在粘合目录中,连接类型是什么?如果表在粘合目录中,则不需要任何连接。只要您的数据源/数据接收器是Glue/S3,您就不需要除了VPC S3端点之外的连接 如果你想连接到Redshift或MySQL数据库,你需要一个连接。更清楚地说,这是否意味着如果我的数据在glue catalog中已经可用,我需要添加VPC S3端点(网

我的数据表在Glue元数据目录中。我需要在glue作业的python shell脚本中使用这些数据。当我创建粘合作业时,它最后给了我选择连接类型的选项。是否必须添加连接?如果表在粘合目录中,连接类型是什么?

如果表在粘合目录中,则不需要任何连接。只要您的数据源/数据接收器是Glue/S3,您就不需要除了VPC S3端点之外的连接


如果你想连接到Redshift或MySQL数据库,你需要一个连接。

更清楚地说,这是否意味着如果我的数据在glue catalog中已经可用,我需要添加VPC S3端点(网络连接)?事实上,我通过设置一个从S3 bucket中获取tata的爬虫程序来获取数据以粘合目录。在这种情况下,我是否必须添加S3连接(网络作为连接类型)?是的。您的粘合作业位于专用VPC中,请求需要路由到S3。