Python Scrapy:重复请求440状态代码
如果响应状态代码为440,scrapy中是否有方法重复请求 有时,我试图抓取的服务器响应440代码,而我无法抓取数据 非常感谢 基于,您可以添加并配置Python Scrapy:重复请求440状态代码,python,request,scrapy,web-crawler,Python,Request,Scrapy,Web Crawler,如果响应状态代码为440,scrapy中是否有方法重复请求 有时,我试图抓取的服务器响应440代码,而我无法抓取数据 非常感谢 基于,您可以添加并配置RetryMiddleware,使其按您想要的方式运行 您要更改的设置有:重试次数和重试次数。特别是第二个,默认值为:[500502503500408],因此您只需将440添加到列表中即可 查看有关中间件的更多详细信息
RetryMiddleware
,使其按您想要的方式运行
您要更改的设置有:重试次数
和重试次数
。特别是第二个,默认值为:[500502503500408]
,因此您只需将440
添加到列表中即可
查看有关中间件的更多详细信息