Julia 如何使用Blink使用javascript调用加密或模糊json来抓取网页?

Julia 如何使用Blink使用javascript调用加密或模糊json来抓取网页?,julia,blink,Julia,Blink,从Avik Sengupta先生在NLP上的youtube视频中了解到: a) HTTP.get(url)不能用于抓取使用javascript调用加密或模糊json的网页。 b) 在这种情况下可以使用闪烁。 我是新手,在这方面找不到任何有用的文档/示例 请指导我使用Blink来刮这些网页 它是JavaScript而不是jsp 如果您对该主题不熟悉,请首先尝试Selenium(它应该通过PyCall工作)。Selenium有几个很好的教程,通过这些教程可以了解web驱动程序体系结构 一旦您有了硒的

从Avik Sengupta先生在NLP上的youtube视频中了解到:
a) HTTP.get(url)不能用于抓取使用javascript调用加密或模糊json的网页。
b) 在这种情况下可以使用闪烁。

我是新手,在这方面找不到任何有用的文档/示例

请指导我使用Blink来刮这些网页

  • 它是JavaScript而不是jsp
  • 如果您对该主题不熟悉,请首先尝试Selenium(它应该通过PyCall工作)。Selenium有几个很好的教程,通过这些教程可以了解web驱动程序体系结构
  • 一旦您有了硒的使用经验,那么在上的Blink文档应该是非常明显的。您基本上需要导航到web页面,然后使用JavaScript获取其元素
  • 最后但并非最不重要的一点——对于这种类型的项目,始终检查在您的用例中刮取是否合法和合乎道德