使用Python从需要启用cookie的站点抓取HTML的最佳软件包
我目前正在使用Python3.6来抓取URL文件并搜索特定字符串。运行脚本后，返回的HTML指示需要启用Cookie。任何版本的Python3.x都不支持Mechanize和我找到的所有其他库。有人能告诉我哪些库可以启用cookie，从而呈现正确的HTML吗 您可以使用awesome使用Python从需要启用cookie的站点抓取HTML的最佳软件包,python,web,web-crawler,urllib2,Python,Web,Web Crawler,Urllib2,我目前正在使用Python3.6来抓取URL文件并搜索特定字符串。运行脚本后，返回的HTML指示需要启用Cookie。任何版本的Python3.x都不支持Mechanize和我找到的所有其他库。有人能告诉我哪些库可以启用cookie，从而呈现正确的HTML吗 您可以使用awesome请求包检索和发送cookie 发送cookies: cookies = { cookies_are:'working' } requests.get(url, cookies=cookies) r
请求cookies = {
cookies_are:'working'
}
requests.get(url, cookies=cookies)
r = requests.get(url)
r.cookies #return a dictionary
cookies = {
cookies_are:'working'
}
requests.get(url, cookies=cookies)
r = requests.get(url)
r.cookies #return a dictionary
更多信息请查看。希望有帮助
请求