Pagination Web刮板分页

Pagination Web刮板分页,pagination,apify,Pagination,Apify,我已经创建了一个web scraper,在这里我试图获取动态数据,该数据在页面加载后加载到div中 这里是我的代码和源网站url 但是有点击分页,我不知道怎么做 我尝试了这个链接的所有方法,但都不起作用 非常感谢您的帮助和快速帮助。在这种情况下,分页会在单个页面上动态加载,因此排队新页面没有意义。您只需单击页面按钮即可进入下一页,单击后稍等也是一种好的做法 $('#PGPAGES span').eq(1).click(); await context.waitFor(1000) 您可以通过一个

我已经创建了一个web scraper,在这里我试图获取动态数据,该数据在页面加载后加载到div中

这里是我的代码和源网站url

但是有点击分页,我不知道怎么做

我尝试了这个链接的所有方法,但都不起作用


非常感谢您的帮助和快速帮助。

在这种情况下,分页会在单个页面上动态加载,因此排队新页面没有意义。您只需单击页面按钮即可进入下一页,单击后稍等也是一种好的做法

$('#PGPAGES span').eq(1).click();
await context.waitFor(1000)
您可以通过一个简单的循环来刮除所有页面

const numberOfPages = 8 // You can scrape this number too
for (let i = 1; i <= numberOfPages; i++) {
    // Your scraping code, push data to an array and return them in the end
    $('#PGPAGES span').eq(i).click();
    await context.waitFor(1000)
}
const numberOfPages = 8 // You can scrape this number too
for (let i = 1; i <= numberOfPages; i++) {
    // Your scraping code, push data to an array and return them in the end
    $('#PGPAGES span').eq(i).click();
    await context.waitFor(1000)
}