Web crawler 使用import.io选择多个下拉菜单
我正试图用它来爬过一个电子商务网站,收集各种定价信息。然而,每种产品的价格都是由用户设置了大量下拉列表的内容决定的 链接至网站: 我需要爬虫程序遍历所有不同的选项,并收集与此产品相关的所有可能的定价组合。我最初尝试使用Chrome的web scraper插件,但发现该扩展不支持一个页面内的多个单击操作 我认为这在import.io中是可能的,但我可能错了。是否有人知道如何收集这些数据,即使是使用import.io的替代方案Web crawler 使用import.io选择多个下拉菜单,web-crawler,import.io,Web Crawler,Import.io,我正试图用它来爬过一个电子商务网站,收集各种定价信息。然而,每种产品的价格都是由用户设置了大量下拉列表的内容决定的 链接至网站: 我需要爬虫程序遍历所有不同的选项,并收集与此产品相关的所有可能的定价组合。我最初尝试使用Chrome的web scraper插件,但发现该扩展不支持一个页面内的多个单击操作 我认为这在import.io中是可能的,但我可能错了。是否有人知道如何收集这些数据,即使是使用import.io的替代方案 谢谢…不幸的是,使用import.io工具无法在所有不同的选项中爬行。对
谢谢…不幸的是,使用import.io工具无法在所有不同的选项中爬行。对于导入,您需要手动将所有这些不同的选项关联为输入。我在类似的电子商务网站上取得了成功,我编写了一个python脚本,可以循环使用所有可能的选项并写出数据 谢谢,
梅格