Как я могу управлять PhantomJS, чтобы пропустить загрузку какого-то ресурса?

Question

phantomjs имеет конфигурационный LoadImage,

, но я хочу больше,

, как я могу контролировать phantomjs, чтобы пропустить загрузки какой-то ресурс,

, такие как CSS и т.д ...

== ===

хорошие новости: эта функция добавлен.

https://code.google.com/p/phantomjs/issues/detail?id=230

Суть:

page.onResourceRequested = function(requestData, request) { 
    if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || requestData['Content-Type'] == 'text/css') { 
     console.log('The url of the request is matching. Aborting: ' + requestData['url']); 
     request.abort(); 
    } 
}; 

Answer 1

Итак, наконец, вы можете попробовать это http://github.com/eugenehp/node-crawler

иначе вы можете попробовать ниже подход с PhantomJS

Простым способом, заключается в load page -> parse page -> исключить нежелательный ресурс -> загрузить его в PhatomJS.

Другой способ - просто заблокировать хосты в брандмауэре.

При необходимости вы можете использовать прокси-сервер для блокировки определенных URL-адресов и запросов к ним.

И еще один, загрузите страницу, а затем удалите ненужные ресурсы, но я думаю, что здесь не правильный подход.

Answer 2

Пока нет (phantomjs 1.7), он НЕ поддерживает это.

Но противный решение использует HTTP прокси-сервер, так что вы можете отсеивать некоторый запрос, что вам не нужно

Answer 3

Использование page.onResourceRequested, как в примере loadurlwithoutcss.js:

page.onResourceRequested = function(requestData, request) { 
    if ((/http:\/\/.+?\.css/gi).test(requestData['url']) || 
      requestData.headers['Content-Type'] == 'text/css') { 
     console.log('The url of the request is matching. Aborting: ' + requestData['url']); 
     request.abort(); 
    } 
}; 

Answer 4

Обновлено, рабочая !

Поскольку PhantomJS 1.9, существующий ответ не работал. Вы должны использовать этот код:

var webPage = require('webpage'); 
var page = webPage.create(); 

page.onResourceRequested = function(requestData, networkRequest) { 
    var match = requestData.url.match(/wordfamily.js/g); 
    if (match != null) { 
    console.log('Request (#' + requestData.id + '): ' + JSON.stringify(requestData)); 
    networkRequest.cancel(); // or .abort() 
    } 
}; 

Если вы используете прерывание() вместо того, чтобы отменить(), это вызовет onResourceError.

Вы можете look at the PhantomJS docs