Java 抓住谷歌的搜索“下一页”-JsoupWebCrawler

Java 抓住谷歌的搜索“下一页”-JsoupWebCrawler,java,hyperlink,web-crawler,jsoup,Java,Hyperlink,Web Crawler,Jsoup,我正在构建一个java webcrawler,我需要从我请求的Google搜索中获取下一个页面链接。为此,我试图找到一种模式或方法,但直到现在我还没有找到任何线索 查看此图片: 您可以测试自己,下一页对于您传递鼠标的每个数字都是相同的链接。唯一会在链接上改变的想法是链接末尾的零件开始=编号。对于搜索的每一页,它在开始时加上10,因为这是每页结果的链接数 但是,奇怪的是,当您请求浏览器显示其代码时,此默认链接没有出现在页面的源代码中。也许这与谷歌索引过程有关,但我不确定,因为我还不是一个专家程序员

我正在构建一个java webcrawler,我需要从我请求的Google搜索中获取下一个页面链接。为此,我试图找到一种模式或方法,但直到现在我还没有找到任何线索

查看此图片:

您可以测试自己,下一页对于您传递鼠标的每个数字都是相同的链接。唯一会在链接上改变的想法是链接末尾的零件开始=编号。对于搜索的每一页,它在开始时加上10,因为这是每页结果的链接数

但是,奇怪的是,当您请求浏览器显示其代码时,此默认链接没有出现在页面的源代码中。也许这与谷歌索引过程有关,但我不确定,因为我还不是一个专家程序员,特别是在网络编程方面


有人知道我该怎么解决这个问题吗

我建议您使用我已经在使用的库,但这与Jsoup无关,因为它不清楚如何构建代码的逻辑。我认为您可以在此处使用答案[在此处输入链接描述][1][1]: