如何控制PhantomJS跳过下载某种资源?
phantomjs具有配置loadImage 但是我想要更多 如何控制phantomjs跳过下载某种资源 比如css等等 ===== 好消息: 此功能已添加 要点:如何控制PhantomJS跳过下载某种资源?,phantomjs,Phantomjs,phantomjs具有配置loadImage 但是我想要更多 如何控制phantomjs跳过下载某种资源 比如css等等 ===== 好消息: 此功能已添加 要点: page.onResourceRequested = function(requestData, request) { if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || requestData['Content-Type'] == 'text/css') {
page.onResourceRequested = function(requestData, request) {
if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || requestData['Content-Type'] == 'text/css') {
console.log('The url of the request is matching. Aborting: ' + requestData['url']);
request.abort();
}
};
所以最后你可以试试这个 否则,您仍然可以使用PhantomJS尝试以下方法 简单的方法是加载页面->解析页面->排除不需要的资源->将其加载到PhatomJS中 另一种方法就是简单地在防火墙中阻止主机 或者,您可以使用代理阻止某些URL地址和对它们的查询 还有一个,加载页面,然后删除不需要的资源,但我认为这不是正确的方法。现在不行(phantomjs 1.7),它不支持这种方法 但是一个讨厌的解决方案是使用http代理,因此您可以筛选出一些不需要使用的请求,例如:
已更新,正在工作强> 自从PhantomJS 1.9以来,现有的答案就不起作用了。您必须使用以下代码:
var webPage = require('webpage');
var page = webPage.create();
page.onResourceRequested = function(requestData, networkRequest) {
var match = requestData.url.match(/wordfamily.js/g);
if (match != null) {
console.log('Request (#' + requestData.id + '): ' + JSON.stringify(requestData));
networkRequest.cancel(); // or .abort()
}
};
如果使用abort()而不是cancel(),则会触发onResourceError
你可以我也想知道,如何让phantomjs跳过特定的资源好消息:添加了此功能。@user2864740为什么要将其编辑到问题中而不是作为答案发布?我想知道PhatomJS本身为什么不这样做?有时,我们需要在没有css/img的情况下加载很多页面,无法手动排除不需要的资源。有page.content这样的东西,您可以使用regex过滤器(css,js)使用某种过滤资源来操作它。或者你可以简单地抓取网页,只解析你想留下的图片。谢谢回复。你是说Phantomjs提供了一些过滤接口/api,我们可以跳过一些资源吗?(不再下载了)。api名称是什么?抱歉,这不是PhantomJSAPI的一部分,我指的是类似String.replace()或Javascript RegExp对象的东西。看一看,不是我需要的。我需要给PhantomJS一个页面url和特殊类型的资源,这样它就可以在这个url下载我想要的内容,但不需要我告诉它要下载哪个详细资源url。当然这是最好的解决方案,顺便说一句,你应该始终使用代理(varnish或squid)来“控制”你的程序正在下载的内容(添加队列、缓存等)phantomjs 2.1.1没有取消()只是中止()
var webPage = require('webpage');
var page = webPage.create();
page.onResourceRequested = function(requestData, networkRequest) {
var match = requestData.url.match(/wordfamily.js/g);
if (match != null) {
console.log('Request (#' + requestData.id + '): ' + JSON.stringify(requestData));
networkRequest.cancel(); // or .abort()
}
};