Python 如何将scrapy与我的烧瓶应用程序集成？_Python_Flask_Web Scraping_Scrapy

Python 如何将scrapy与我的烧瓶应用程序集成？

python flask web-scraping scrapy

Python 如何将scrapy与我的烧瓶应用程序集成？,python,flask,web-scraping,scrapy,Python,Flask,Web Scraping,Scrapy,我有一个应用程序需要从几个网站上删除数据，我已经能够使用python的scrapy库删除数据，但问题是我希望有一个功能，我可以使用restapi调用我的spider 我如何才能做到这一点，因为我不希望有额外的步骤，首先抓取数据，然后在后端保存数据，然后使用API获取数据任何帮助都将不胜感激。我已经尝试了Arachne，但是我无法从scrapy返回JSON响应。我想您可能想看看scrapyd：它允许您部署spider并使用JSON API控制它们

我有一个应用程序需要从几个网站上删除数据，我已经能够使用python的scrapy库删除数据，但问题是我希望有一个功能，我可以使用restapi调用我的spider

我如何才能做到这一点，因为我不希望有额外的步骤，首先抓取数据，然后在后端保存数据，然后使用API获取数据

任何帮助都将不胜感激。我已经尝试了Arachne，但是我无法从scrapy返回JSON响应。

我想您可能想看看

scrapyd

：

它允许您部署spider并使用JSON API控制它们