Python 用爬行器进行假地理定位
我试图刮一个网站,它根据发送请求的IP的地理位置提供不同的页面。我使用的是位于美国的亚马逊EC2(这意味着它提供了一个专门为我们设计的页面),但我希望该页面将在印度提供。scrapy是否提供了一种解决此问题的方法?如果您正在抓取的站点进行基于IP的检测,您唯一的选择就是以某种方式更改您的IP。这意味着要么使用不同的服务器(我不相信EC2在印度运行),要么代理服务器请求。也许你能找到印度的代理服务Python 用爬行器进行假地理定位,python,web-crawler,scrapy,Python,Web Crawler,Scrapy,我试图刮一个网站,它根据发送请求的IP的地理位置提供不同的页面。我使用的是位于美国的亚马逊EC2(这意味着它提供了一个专门为我们设计的页面),但我希望该页面将在印度提供。scrapy是否提供了一种解决此问题的方法?如果您正在抓取的站点进行基于IP的检测,您唯一的选择就是以某种方式更改您的IP。这意味着要么使用不同的服务器(我不相信EC2在印度运行),要么代理服务器请求。也许你能找到印度的代理服务