Warning: file_get_contents(/data/phpspider/zhask/data//catemap/9/javascript/395.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Javascript 刮擦_Javascript_Scrapy_Web Crawler - Fatal编程技术网
Fatal编程技术网

Javascript 刮擦

javascript scrapy web-crawler

Javascript 刮擦,javascript,scrapy,web-crawler,Javascript,Scrapy,Web Crawler,我曾试图用scrapy刮取课程信息，但当我点击个别课程编号时，它不会将我重定向到另一个url，而是一个javascript文档操作调用。我如何访问href中的javascript文档，并像使用scrapy在普通html上一样逐个地刮取它们 您能提供网站url吗。查询应使用Kingsborough CC、2018秋季学期和BIO department。谢谢我看了一下，在这个函数JS中，它发出一个POST请求，第二个值是它使用的参数之一。请求的URL为：

我曾试图用scrapy刮取课程信息，但当我点击个别课程编号时，它不会将我重定向到另一个url，而是一个javascript文档操作调用。我如何访问href中的javascript文档，并像使用scrapy在普通html上一样逐个地刮取它们

您能提供网站url吗。查询应使用Kingsborough CC、2018秋季学期和BIO department。谢谢我看了一下，在这个函数JS中，它发出一个POST请求，第二个值是它使用的参数之一。请求的URL为：