Curl 使用Python请求从data.world下载covid数据集

Curl 使用Python请求从data.world下载covid数据集,curl,amazon-s3,aws-lambda,python-requests,Curl,Amazon S3,Aws Lambda,Python Requests,我正在尝试将新冠病毒19活动数据集从data.world获取到AWS S3中,用于数据管道 我目前的做法是: 编写lambda函数以使用python请求获取数据。get() 使用csv编写器将内容存储到s3 但是,在执行requests.get()时,我得到了一个html响应 有人能帮我获取csv数据而不是html吗 谢谢 此站点需要身份验证。因此,首先,通过发送用户密码对在站点上验证您自己,然后您可以使用请求会话对象创建会话 完成后,您可以尝试模拟用于下载数据集的实际请求。当我单击链接时,会

我正在尝试将新冠病毒19活动数据集从data.world获取到AWS S3中,用于数据管道

我目前的做法是:

  • 编写lambda函数以使用python请求获取数据。get()
  • 使用csv编写器将内容存储到s3
  • 但是,在执行requests.get()时,我得到了一个html响应

    有人能帮我获取csv数据而不是html吗


    谢谢

    此站点需要身份验证。因此,首先,通过发送用户密码对在站点上验证您自己,然后您可以使用
    请求
    会话
    对象创建会话


    完成后,您可以尝试模拟用于下载数据集的实际请求。

    当我单击链接时,会看到一个页面要求我加入。使用
    get()
    时,您未登录,因此无法获取csv文件。感谢@Mike67复制我的问题。我可以向下滚动,导航到COVID-19 Activity.csv->View->copy link address->make a python request.get()调用获取数据。感谢@mooncarter复制我的问题。我可以向下滚动,导航到COVID-19 Activity.csv->View->copy link address->make a python request.get()调用来获取数据。@Jeet很高兴听到这个消息!