Java 如何制作一个网络爬虫来访问作为用户查询信息的搜索结果而获得的链接?

Java 如何制作一个网络爬虫来访问作为用户查询信息的搜索结果而获得的链接?,java,web,web-crawler,Java,Web,Web Crawler,如何制作一个网络爬虫来访问作为用户查询信息的搜索结果而获得的链接?比方说,如果用户对某个主题提出一些查询,爬虫程序只能访问一些顶级链接。有人能告诉我如何实现这一点吗?谷歌可能是你最好的选择。它是免费的,可以通过编程与之交互 然而,如果您需要与一个不知名的站点交互,或者需要细粒度的控制,我已经用它编写了几个爬虫程序。这有点冗长,但确实有效。您能告诉我如何在windows 7的netbeans中安装并使用google自定义搜索吗?google提供了两个简短的代码示例()以及下载和安装说明()。请尝试

如何制作一个网络爬虫来访问作为用户查询信息的搜索结果而获得的链接?比方说,如果用户对某个主题提出一些查询,爬虫程序只能访问一些顶级链接。有人能告诉我如何实现这一点吗?

谷歌可能是你最好的选择。它是免费的,可以通过编程与之交互


然而,如果您需要与一个不知名的站点交互,或者需要细粒度的控制,我已经用它编写了几个爬虫程序。这有点冗长,但确实有效。

您能告诉我如何在windows 7的netbeans中安装并使用google自定义搜索吗?google提供了两个简短的代码示例()以及下载和安装说明()。请尝试一下,如果您有问题,请告诉我。示例代码不起作用。我在stackoverflow上发现了此代码,但即使此代码不起作用(我已获得API密钥),您能给我一些代码来测试它吗?