Curl 使用Python请求从data.world下载covid数据集
我正在尝试将新冠病毒19活动数据集从data.world获取到AWS S3中,用于数据管道 我目前的做法是:Curl 使用Python请求从data.world下载covid数据集,curl,amazon-s3,aws-lambda,python-requests,Curl,Amazon S3,Aws Lambda,Python Requests,我正在尝试将新冠病毒19活动数据集从data.world获取到AWS S3中,用于数据管道 我目前的做法是: 编写lambda函数以使用python请求获取数据。get() 使用csv编写器将内容存储到s3 但是,在执行requests.get()时,我得到了一个html响应 有人能帮我获取csv数据而不是html吗 谢谢 此站点需要身份验证。因此,首先,通过发送用户密码对在站点上验证您自己,然后您可以使用请求会话对象创建会话 完成后,您可以尝试模拟用于下载数据集的实际请求。当我单击链接时,会
谢谢 此站点需要身份验证。因此,首先,通过发送用户密码对在站点上验证您自己,然后您可以使用
请求会话对象创建会话
完成后,您可以尝试模拟用于下载数据集的实际请求。当我单击链接时,会看到一个页面要求我加入。使用get()
时,您未登录,因此无法获取csv文件。感谢@Mike67复制我的问题。我可以向下滚动,导航到COVID-19 Activity.csv->View->copy link address->make a python request.get()调用获取数据。感谢@mooncarter复制我的问题。我可以向下滚动,导航到COVID-19 Activity.csv->View->copy link address->make a python request.get()调用来获取数据。@Jeet很高兴听到这个消息!