Python scrapy redis如何将第一个请求作为post请求实现
我们知道,scrapy可以通过重写start_request函数来实现post请求,因此scrapy_redis?您可以重写Python scrapy redis如何将第一个请求作为post请求实现,python,scrapy,Python,Scrapy,我们知道,scrapy可以通过重写start_request函数来实现post请求,因此scrapy_redis?您可以重写start_请求,然后返回self。next_requests(),就像scrapy redis那样: 这是个好问题!我还没有真正接触过scrapy redis,但它似乎超越了scrapy scheduler。任何预定的请求都会转到redis,当爬虫程序正在寻找要爬虫的内容时,它也会从redis弹出。好吧,它的功能应该差不多一样吗?如果在start\u请求中计划,您确定它不
start_请求
,然后返回self。next_requests()
,就像scrapy redis
那样:
这是个好问题!我还没有真正接触过scrapy redis,但它似乎超越了scrapy scheduler。任何预定的请求都会转到redis,当爬虫程序正在寻找要爬虫的内容时,它也会从redis弹出。好吧,它的功能应该差不多一样吗?如果在
start\u请求中计划,您确定它不起作用吗?