Python 网页抓取不可能登录?

Python 网页抓取不可能登录?,python,session,web-scraping,Python,Session,Web Scraping,我一直试图使用python会话请求登录到一个网站,但确实遇到了麻烦 我访问该网站并检索cookies以备下次请求 成功, 问题是有一个带有cookie许可的弹出窗口。 它只允许我登录,如果我同意我相信(这是 手动程序中的行为) 我通过中的“网络”选项卡跟踪cookie同意url请求 google chrome inspect, 单击同意cookie按钮facebook pixel和谷歌 FundingChoiceMessagesURL使用多个参数调用,这些参数 我不知道如何生成(至少是这样) 网

我一直试图使用python会话请求登录到一个网站,但确实遇到了麻烦

  • 我访问该网站并检索cookies以备下次请求 成功,
  • 问题是有一个带有cookie许可的弹出窗口。
  • 它只允许我登录,如果我同意我相信(这是 手动程序中的行为)
  • 我通过中的“网络”选项卡跟踪cookie同意url请求 google chrome inspect,
  • 单击同意cookie按钮facebook pixel谷歌 FundingChoiceMessagesURL使用多个参数调用,这些参数 我不知道如何生成(至少是这样)
  • 网址:

    • 。(打了两次电话)
    • 。(多次调用5+)





    编辑:

    有人设法度过这一关吗?我已经做了几天了,真的不想使用selenium,因为它似乎接管了鼠标和键盘,我无法继续在我的电脑中进行操作。 有什么建议吗?


    Selenium Rocks Selenium不会控制鼠标/键盘。它在专用的浏览器窗口上平稳运行,同时您可以继续工作。



    感谢使用硒,请参见以下示例:

    • linux
    sudo-apt-get-update
    sudo apt安装铬铬驱动程序
    pip3安装selenium
    

    谢谢您的链接。selenium难道不能在计算机中使用其他程序吗?我原以为它会接管鼠标和键盘hmmYou甚至可以运行
    无头
    selenium会话,因此您甚至不会看到程序工作。别担心selenium webdriver不会接管鼠标和键盘。谢谢,我会看看我是否能完成这一步:)你会看到使用selenium自动化这件事有多好,因为你可以看到你的代码一直在发生什么。享受它;)(如果你想尝试的话,我的第一个网页浏览/自动化项目是Instagram机器人,但你最好创建一个辅助帐户进行测试,并像个人一样给出请求和点击次数)