如何在使用Python';这是一个美丽的群体和要求?

如何在使用Python';这是一个美丽的群体和要求?,python,python-3.x,cookies,web-scraping,beautifulsoup,Python,Python 3.x,Cookies,Web Scraping,Beautifulsoup,我正在尝试创建一个scraper,它将从网页中获取一些数据,但是该网站有一个cookiewall,它会提示窗口,在那里您需要接受cookies 当我解析网站的url时,我的scraper从弹出窗口获取数据,而不是页面本身 有没有办法绕过这个问题?如果您有一个示例url,它可以帮助其他用户。理想情况下,您希望启动一个会话,并在该会话中发送cookies的post请求,但这一切都取决于页面的复杂性。@calestini这里有一个解决方案。不确定页面的复杂性。非常感谢。

我正在尝试创建一个scraper,它将从网页中获取一些数据,但是该网站有一个cookiewall,它会提示窗口,在那里您需要接受cookies

当我解析网站的url时,我的scraper从弹出窗口获取数据,而不是页面本身


有没有办法绕过这个问题?

如果您有一个示例url,它可以帮助其他用户。理想情况下,您希望启动一个会话,并在该会话中发送cookies的post请求,但这一切都取决于页面的复杂性。@calestini这里有一个解决方案。不确定页面的复杂性。非常感谢。