Splash未正确加载用于抓取网站的javascript(scrapy Splash)

Splash未正确加载用于抓取网站的javascript(scrapy Splash),scrapy,splash-screen,Scrapy,Splash Screen,我无法调试Splash无法正确加载此网站的javascript的原因: 我已经提到了禁用Splash在私有模式下运行的答案,以及其他解决方案,比如增加等待时间和设置用户代理 然而,该网站仍在加载,就像在Splash上没有JS一样,如下图所示 我目前正在调试为什么网站没有正确加载,以便将其与scrapy splash代码合并 这是我目前的剧本。提前感谢您的时间和帮助 function main(splash, args) splash:set_user_agent('Mozilla/5.0

我无法调试Splash无法正确加载此网站的javascript的原因:

我已经提到了禁用Splash在私有模式下运行的答案,以及其他解决方案,比如增加等待时间和设置用户代理

然而,该网站仍在加载,就像在Splash上没有JS一样,如下图所示

我目前正在调试为什么网站没有正确加载,以便将其与scrapy splash代码合并

这是我目前的剧本。提前感谢您的时间和帮助

function main(splash, args)
  splash:set_user_agent('Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.61 Safari/537.36')
  splash.private_mode_enabled = false
  splash:set_viewport_full()
  splash:go{url=args.url}
  assert(splash:wait(1))
  return {
    html = splash:html(),
    png = splash:png(),
    har = splash:har(),
  }
end