Web scraping 如何打开浏览器并连接到网站,然后使用java中的jsoup解析该网站?

Web scraping 如何打开浏览器并连接到网站,然后使用java中的jsoup解析该网站?,web-scraping,jsoup,Web Scraping,Jsoup,我有一个项目,需要一点网页抓取。主要要求是让用户在java应用程序上输入数据。然后,应用程序将连接到数据输入网站,然后将自动将用户输入的数据输入到该网站。我还没有开始编写代码,因为我不知道从哪里开始。我已经对此进行了一些研究,它指向了jsoup和桌面api(用于webscraping的jsoup和用于打开浏览器的桌面api)。希望在这里能收到Java专家的回复 谢谢 JSoup肯定会帮你清理的。但是,您需要处理HTTP(get/POSTs等),为此,我建议您这样做 我不确定您是否要打开浏览器。相

我有一个项目,需要一点网页抓取。主要要求是让用户在java应用程序上输入数据。然后,应用程序将连接到数据输入网站,然后将自动将用户输入的数据输入到该网站。我还没有开始编写代码,因为我不知道从哪里开始。我已经对此进行了一些研究,它指向了jsoup和桌面api(用于webscraping的jsoup和用于打开浏览器的桌面api)。希望在这里能收到Java专家的回复


谢谢

JSoup肯定会帮你清理的。但是,您需要处理HTTP(get/POSTs等),为此,我建议您这样做


我不确定您是否要打开浏览器。相反,我希望您请求用户输入(可能通过Swing UI或基于浏览器的UI),然后使用HTTP直接与网站交谈。我认为您不需要打开浏览器即可访问目标网站。如果您这样做了,那么请查看,它允许您直接从Java驱动浏览器。

JSoup肯定会帮您完成抓取。但是,您需要处理HTTP(get/POSTs等),为此,我建议您这样做


我不确定您是否要打开浏览器。相反,我希望您请求用户输入(可能通过Swing UI或基于浏览器的UI),然后使用HTTP直接与网站交谈。我认为您不需要打开浏览器即可访问目标网站。如果需要,请查看,它允许您直接从Java驱动浏览器。

嗨,Brian,谢谢。我会试着测试你分享给我的东西。嗨,布莱恩,谢谢你。我会试着测试你分享给我的东西。