Flask 使用网页触发scrapy shell

Flask 使用网页触发scrapy shell,flask,web-scraping,web-crawler,scrapy,scrapy-spider,Flask,Web Scraping,Web Crawler,Scrapy,Scrapy Spider,我不熟悉scrapy和python。我已经编写了一个spider,它从命令行获取start_URL并开始抓取。到目前为止,一切都很好 现在,我想从一个网页(使用Flask设计)提交开始URL。点击一个按钮后,它应该会触发scrapy shell并开始抓取网站。这是project可以提供帮助的。有一个JSON API,可以用来部署和运行爬行器。这样,您的Web应用程序部件将不会被活动的Web刮取过程阻止: Scrapyd是一个用于部署和运行Scrapy爬行器的应用程序。信息技术 使您能够部署(上载

我不熟悉scrapy和python。我已经编写了一个spider,它从命令行获取start_URL并开始抓取。到目前为止,一切都很好

现在,我想从一个网页(使用Flask设计)提交开始URL。点击一个按钮后,它应该会触发scrapy shell并开始抓取网站。

这是project可以提供帮助的。有一个JSON API,可以用来部署和运行爬行器。这样,您的Web应用程序部件将不会被活动的Web刮取过程阻止:

Scrapyd是一个用于部署和运行Scrapy爬行器的应用程序。信息技术 使您能够部署(上载)项目并控制其spider 使用JSON API