通过会话代理的python请求

通过会话代理的python请求,python,session,proxy,web-crawler,Python,Session,Proxy,Web Crawler,我有一个用例从特定站点获取数据,该站点每次都需要通过会话进行请求。我已经用python创建了会话,还设置了cookie,其中包含我登录的详细信息 我目前正在一个数据中心上托管我的脚本,但该帐户被阻止。我正在考虑通过代理请求数据,但仍然觉得如果我的会话是从另一台机器创建的,并且使用代理通过会话获取数据,那么代理ip被列入黑名单的可能性有多大? 这里有什么可能的解决方案来解决此类问题。Python请求会话中的场景根据不同的地区而不同, 与某些国家/地区一样,由于国家/地区法律的原因,请求中不允许使用

我有一个用例从特定站点获取数据,该站点每次都需要通过会话进行请求。我已经用python创建了会话,还设置了cookie,其中包含我登录的详细信息

我目前正在一个数据中心上托管我的脚本,但该帐户被阻止。我正在考虑通过代理请求数据,但仍然觉得如果我的会话是从另一台机器创建的,并且使用代理通过会话获取数据,那么代理ip被列入黑名单的可能性有多大?


这里有什么可能的解决方案来解决此类问题。

Python请求会话中的场景根据不同的地区而不同, 与某些国家/地区一样,由于国家/地区法律的原因,请求中不允许使用某些标题

由于您已经在进行登录会话,这意味着您的用户代理和其他头将根据登录请求的响应进行设置


解决方案之一可能是使用一个国家的代理,该国家没有从该平台提取数据的严格规则。

您是否在请求中设置了“用户代理”标题?这可能是一种避免阻塞yes@donnyflow其集合的方法