Web &引用;“无限滚动网页”;网络爬虫

Web &引用;“无限滚动网页”;网络爬虫,web,webkit,web-scraping,web-crawler,Web,Webkit,Web Scraping,Web Crawler,我不知道如何抓取无限滚动页面(例如, 任何人都可以向我推荐哪个“python工具箱”可以做到这一点或示例。试试selenium for python它有一个web驱动程序,可以模拟浏览器,因此您可以滚动页面并加载内容 Selenium安装页面:可能重复的

我不知道如何抓取无限滚动页面(例如,
任何人都可以向我推荐哪个“python工具箱”可以做到这一点或示例。

试试selenium for python它有一个web驱动程序,可以模拟浏览器,因此您可以滚动页面并加载内容

Selenium安装页面:

可能重复的