Warning: file_get_contents(/data/phpspider/zhask/data//catemap/4/video/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
如何控制PhantomJS跳过下载某种资源?_Phantomjs - Fatal编程技术网

如何控制PhantomJS跳过下载某种资源?

如何控制PhantomJS跳过下载某种资源?,phantomjs,Phantomjs,phantomjs具有配置loadImage 但是我想要更多 如何控制phantomjs跳过下载某种资源 比如css等等 ===== 好消息: 此功能已添加 要点: page.onResourceRequested = function(requestData, request) { if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || requestData['Content-Type'] == 'text/css') {

phantomjs具有配置loadImage

但是我想要更多

如何控制phantomjs跳过下载某种资源

比如css等等

=====

好消息: 此功能已添加

要点:

page.onResourceRequested = function(requestData, request) {
    if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || requestData['Content-Type'] == 'text/css') {
        console.log('The url of the request is matching. Aborting: ' + requestData['url']);
        request.abort();
    }
};

所以最后你可以试试这个

否则,您仍然可以使用PhantomJS尝试以下方法

简单的方法是加载页面->解析页面->排除不需要的资源->将其加载到PhatomJS中

另一种方法就是简单地在防火墙中阻止主机

或者,您可以使用代理阻止某些URL地址和对它们的查询

还有一个,加载页面,然后删除不需要的资源,但我认为这不是正确的方法。

现在不行(phantomjs 1.7),它不支持这种方法

但是一个讨厌的解决方案是使用http代理,因此您可以筛选出一些不需要使用的请求,例如:


已更新,正在工作

自从PhantomJS 1.9以来,现有的答案就不起作用了。您必须使用以下代码:

var webPage = require('webpage');
var page = webPage.create();

page.onResourceRequested = function(requestData, networkRequest) {
  var match = requestData.url.match(/wordfamily.js/g);
  if (match != null) {
    console.log('Request (#' + requestData.id + '): ' + JSON.stringify(requestData));
    networkRequest.cancel(); // or .abort() 
  }
};
如果使用abort()而不是cancel(),则会触发onResourceError


你可以

我也想知道,如何让phantomjs跳过特定的资源好消息:添加了此功能。@user2864740为什么要将其编辑到问题中而不是作为答案发布?我想知道PhatomJS本身为什么不这样做?有时,我们需要在没有css/img的情况下加载很多页面,无法手动排除不需要的资源。有page.content这样的东西,您可以使用regex过滤器(css,js)使用某种过滤资源来操作它。或者你可以简单地抓取网页,只解析你想留下的图片。谢谢回复。你是说Phantomjs提供了一些过滤接口/api,我们可以跳过一些资源吗?(不再下载了)。api名称是什么?抱歉,这不是PhantomJSAPI的一部分,我指的是类似String.replace()或Javascript RegExp对象的东西。看一看,不是我需要的。我需要给PhantomJS一个页面url和特殊类型的资源,这样它就可以在这个url下载我想要的内容,但不需要我告诉它要下载哪个详细资源url。当然这是最好的解决方案,顺便说一句,你应该始终使用代理(varnish或squid)来“控制”你的程序正在下载的内容(添加队列、缓存等)phantomjs 2.1.1没有取消()只是中止()
var webPage = require('webpage');
var page = webPage.create();

page.onResourceRequested = function(requestData, networkRequest) {
  var match = requestData.url.match(/wordfamily.js/g);
  if (match != null) {
    console.log('Request (#' + requestData.id + '): ' + JSON.stringify(requestData));
    networkRequest.cancel(); // or .abort() 
  }
};