Python 从带有Scrapy参数的脚本运行Scrapy spider
我已经用scrapy编写了一个spider&我能够通过python脚本成功地运行它。 问题是,在通过scrapy提示符运行spider时,我们提供了类似“-o scrapedata.json-t json”的图形 我想通过python脚本运行“scrapy crawl myspider-o ScrapedData.json-t json”。 非常感谢您的帮助。提前谢谢Python 从带有Scrapy参数的脚本运行Scrapy spider,python,scrapy,Python,Scrapy,我已经用scrapy编写了一个spider&我能够通过python脚本成功地运行它。 问题是,在通过scrapy提示符运行spider时,我们提供了类似“-o scrapedata.json-t json”的图形 我想通过python脚本运行“scrapy crawl myspider-o ScrapedData.json-t json”。 非常感谢您的帮助。提前谢谢 -o ScrapedData.json覆盖提要URI设置 和-t json覆盖FEED\u格式设置 (见附件) 因此,当从脚
覆盖-o ScrapedData.json
设置提要URI
- 和
覆盖-t json
FEED\u格式设置
from scrapy import cmdline
cmdline.execute("scrapy crawl myspider -o ScrapedData.json -t json".split())
我不确定您的问题是否正确,但您可能想看看python
子流程
模块。