Python 什么';存储收集的数据以管理网站的最佳方式是什么?

Python 什么';存储收集的数据以管理网站的最佳方式是什么?,python,web-scraping,scrapy,Python,Web Scraping,Scrapy,我正在用scrapy(python)构建一组爬虫程序,我想将这些数据收集到一个webapp(日历,例如:)中。这是存储数据的最佳方式吗?将已爬网的网站解析为字典(签出)。 现在将字典转储为json字符串,并将json字符串存储在json数据库中(例如MongoDB或Postgres)。如果没有更多信息,很难判断。但一般来说,对于大多数应用程序和项目来说,一个sqlite数据库就足够了。

我正在用
scrapy
(python)构建一组爬虫程序,我想将这些数据收集到一个webapp(日历,例如:)中。这是存储数据的最佳方式吗?

将已爬网的网站解析为字典(签出)。
现在将字典转储为json字符串,并将json字符串存储在json数据库中(例如MongoDB或Postgres)。

如果没有更多信息,很难判断。但一般来说,对于大多数应用程序和项目来说,一个sqlite数据库就足够了。