如何访问javascript生成的html信息?

如何访问javascript生成的html信息?,java,javascript,ajax,parsing,Java,Javascript,Ajax,Parsing,我想从你那里得到文章的标题 但我认为html是由javascript生成的,因为它只有在firefox上使用“inspect元素”时才可见。 我怎样才能拿到这些文章?也许,其中一种方法是模拟浏览器,但这似乎有些过头了。 我更喜欢用Java来做这件事,但是Python也可以。谢谢你的帮助 编辑: 我尝试使用api。但是有很多错误的URL(找不到页面)。有人对如何获取URL和标题有更多的想法吗?可能就是你想要的;这是一个浏览器自动化框架 您可以使用Python,但Selenium实际上使用Firef

我想从你那里得到文章的标题

但我认为html是由javascript生成的,因为它只有在firefox上使用“inspect元素”时才可见。 我怎样才能拿到这些文章?也许,其中一种方法是模拟浏览器,但这似乎有些过头了。 我更喜欢用Java来做这件事,但是Python也可以。谢谢你的帮助

编辑: 我尝试使用api。但是有很多错误的URL(找不到页面)。有人对如何获取URL和标题有更多的想法吗?

可能就是你想要的;这是一个浏览器自动化框架

您可以使用Python,但Selenium实际上使用Firefox解析站点的内容(我上次听说)


您可以获得python版本,但还有其他版本。

您可以尝试使用没有GUI的浏览器。它具有良好的JavaScript支持,您可以从Java程序中读取页面内容。

作为此特定问题的替代解决方案,使用如何?它们为JavaScript支持提供JSONP。如果他们改变站点布局,使用API可能更能证明未来