Python 将位置数据添加到S3上的csv文件

Python 将位置数据添加到S3上的csv文件,python,amazon-web-services,amazon-s3,architecture,Python,Amazon Web Services,Amazon S3,Architecture,给定文件中100000行经度/纬度,如 longitude|latitude -81.41071|45.63808 要使用地理代码API查找国家、州、县 这并不难,发到类似https://getthegeos/45.63808,-81.41071.json 并解析返回的.json以返回国家等 我想知道的是一个很好的方法来设计这个 最简单的当然是在EC2上运行它(甚至可能在反向地理编码器实例的AMI上) 或者使用胶水作业,或者使用SQS队列 谢谢你的建议 很明显,您希望为此使用一个shapefi

给定文件中100000行经度/纬度,如

longitude|latitude
-81.41071|45.63808
要使用地理代码API查找国家、州、县

这并不难,发到类似https://getthegeos/45.63808,-81.41071.json

并解析返回的.json以返回国家等

我想知道的是一个很好的方法来设计这个

最简单的当然是在EC2上运行它(甚至可能在反向地理编码器实例的AMI上)

或者使用胶水作业,或者使用SQS队列


谢谢你的建议

很明显,您希望为此使用一个shapefile。我非常喜欢使用其他StackExchange站点,这些站点专门研究该主题(例如,机器学习、数据科学或在本例中是GIS)

在这种情况下,地理信息系统网站本身引用了


另一方面,如果您正在寻找更多的端到端建议,那么最好在软件工程网站上询问。

建议您使用step函数,然后调用Glue Python Shell作业