Web scraping 如何从维基百科下载所有个人页面？

是否可以下载一个类别（例如）及其所有子类别的所有维基百科页面

---

问题在于，特定页面没有使用最顶层的类别进行标记，而使用Wikimedia API的每页跟踪非常长。是否可以使用某些工具批量下载此文件？

不，不可能，因为类别是如何生成的。你必须自己走。另见上的讨论

对于特定类别，您只需使用“特殊：导出”并在其中添加类别，而不是标题列表。假设您的意思是“下载”的wikitext导出；如果您想要HTML，您唯一的选择就是API中的呈现模块，或parsoid。

您可以从其转储服务器下载整个wikipedia