Https 使用桌面版Outwit Hub Pro缩放子文件夹

Https 使用桌面版Outwit Hub Pro缩放子文件夹,https,web-scraping,Https,Web Scraping,我试图在下面的产品URL上以标签的形式刮取子文件夹。我在之前和之后放置了标记,这在桌面版的outwit hub pro中是需要的,但是当我在fast scape选项中刮取两个URL(Features&Techdata)时,什么也没有发生 网址如下 我是否遗漏了什么,或者程序无法在安全协议中刮取子文件夹?我有解决方案。我使用Firebug,就像我使用Firefox一样。 我所做的是: 转到Firebug中的NET选项卡,然后是XHR选项卡 单击“功能和应用程序”选项卡(我想要的选项卡) 刮

我试图在下面的产品URL上以标签的形式刮取子文件夹。我在之前和之后放置了标记,这在桌面版的outwit hub pro中是需要的,但是当我在fast scape选项中刮取两个URL(Features&Techdata)时,什么也没有发生

网址如下


我是否遗漏了什么,或者程序无法在安全协议中刮取子文件夹?

我有解决方案。我使用Firebug,就像我使用Firefox一样。 我所做的是:

  • 转到Firebug中的NET选项卡,然后是XHR选项卡
  • 单击“功能和应用程序”选项卡(我想要的选项卡) 刮)
  • 然后打开了AJAX请求URL
正常使用前后的标记,然后对XHR选项卡中显示的URL应用刮刀


@Arthur:谢谢你的意见,Arthur,我非常感谢!也希望您能找到许多人在您的道路上提供帮助。

这些选项卡是通过返回html的ajax加载的。我对这个项目一无所知,但我应该给你一些答案。