Web scraping 需要从根站点开始提取数据

我有一个根站点，它引用了外部网站

目标是从根站点收集一些数据，然后跳转到每个引用的站点，并找到一些特定的页面来收集想要的数据

我不想从头开始写这个

有人知道这种刮刀是否可以购买吗？

访问此网站

---

网页抓取不是数据挖掘，我删除了标签。数据挖掘是高级分析，而不是数据收集。谷歌上有大量的网络蜘蛛资源。请不要滥用编程问题网站进行搜索。