Warning: file_get_contents(/data/phpspider/zhask/data//catemap/8/python-3.x/17.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python 3.x Scrapy每5分钟将统计信息发送到作为参数作为POST请求传递的URL_Python 3.x_Scrapy - Fatal编程技术网
Fatal编程技术网
  • python-3.x/
  • Python 3.x Scrapy每5分钟将统计信息发送到作为参数作为POST请求传递的URL

Python 3.x Scrapy每5分钟将统计信息发送到作为参数作为POST请求传递的URL

python-3.x scrapy

Python 3.x Scrapy每5分钟将统计信息发送到作为参数作为POST请求传递的URL,python-3.x,scrapy,Python 3.x,Scrapy,我需要将爬虫统计数据发送到一个URL，该URL作为爬行器参数传递。我需要每隔5分钟发出一次发帖请求。我该怎么做呢？您可能需要编写一个扩展，它只需每5分钟发出一次post请求。 您可以使用scrapy自己的机制（例如engine.download）发出这些请求，也可以使用不同的异步http客户端（例如 如果您不确定如何构造扩展，您可以看看除了不通过http登录之外，哪个做了类似的事情 既然您正在编写扩展，我建议您进行url和间隔设置，但这取决于您的选择

我需要将爬虫统计数据发送到一个URL，该URL作为爬行器参数传递。我需要每隔5分钟发出一次发帖请求。我该怎么做呢？

您可能需要编写一个扩展，它只需每5分钟发出一次post请求。 您可以使用scrapy自己的机制（例如engine.download）发出这些请求，也可以使用不同的异步http客户端（例如

如果您不确定如何构造扩展，您可以看看除了不通过http登录之外，哪个做了类似的事情

既然您正在编写扩展，我建议您进行url和间隔设置，但这取决于您的选择