Warning: file_get_contents(/data/phpspider/zhask/data//catemap/7/neo4j/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Web crawler 使用import.io选择多个下拉菜单_Web Crawler_Import.io - Fatal编程技术网

Web crawler 使用import.io选择多个下拉菜单

Web crawler 使用import.io选择多个下拉菜单,web-crawler,import.io,Web Crawler,Import.io,我正试图用它来爬过一个电子商务网站,收集各种定价信息。然而,每种产品的价格都是由用户设置了大量下拉列表的内容决定的 链接至网站: 我需要爬虫程序遍历所有不同的选项,并收集与此产品相关的所有可能的定价组合。我最初尝试使用Chrome的web scraper插件,但发现该扩展不支持一个页面内的多个单击操作 我认为这在import.io中是可能的,但我可能错了。是否有人知道如何收集这些数据,即使是使用import.io的替代方案 谢谢…不幸的是,使用import.io工具无法在所有不同的选项中爬行。对

我正试图用它来爬过一个电子商务网站,收集各种定价信息。然而,每种产品的价格都是由用户设置了大量下拉列表的内容决定的

链接至网站:

我需要爬虫程序遍历所有不同的选项,并收集与此产品相关的所有可能的定价组合。我最初尝试使用Chrome的web scraper插件,但发现该扩展不支持一个页面内的多个单击操作

我认为这在import.io中是可能的,但我可能错了。是否有人知道如何收集这些数据,即使是使用import.io的替代方案


谢谢…

不幸的是,使用import.io工具无法在所有不同的选项中爬行。对于导入,您需要手动将所有这些不同的选项关联为输入。我在类似的电子商务网站上取得了成功,我编写了一个python脚本,可以循环使用所有可能的选项并写出数据

谢谢,
梅格