Ruby Watir из html вместо URL

Question

в моем сценарии я соскабливаю сайт, содержимое которого создается javascript. Я знаю, что watir идеально подходит для моей ситуации, но, как мы все знаем, он, как правило, добавляет немного накладных расходов и делает программу занятой немного дольше.

В настоящее время я могу войти в систему с помощью Nokogiri и отправить запрос на отправку с именем пользователя/паролем, так как вы можете себе представить, что это действительно быстро. После успешного входа в систему я перейду к адресу, где находится контент, который я хочу очистить, и, как я уже сказал, такой контент является результатом обработки javascript, поэтому Nokogiri не годится с этого момента.

Что я хочу сделать, это использовать Watir для загрузки html, уже возвращенного Nokogiri, чтобы он анализировал весь javascript, а затем продолжал очищать сгенерированный HTML без необходимости использовать Watir с самого начала, чтобы сократить время обработки.

Есть ли способ загрузить контент в Watir из html String, чтобы он обрабатывался вместо вызова метода 'goto'?

Answer 1

Прямой ответ на ваш вопрос - нет. Watir не предназначен для очистки веб-страниц, а для проверки веб-страниц. Тестирование веб-страниц означает навигацию к ним и взаимодействие с ними.

Кроме того, если ваш анализатор html не решит вашу проблему, копирование текста с этого анализатора в Watir также не решит вашу проблему.

Answer 2

Вы всегда можете попробовать.

require 'open-uri' 
require 'nokogiri' 
require 'watir' 
#previous stuff 
`touch temp.html` 
File.open("temp.html", "w") {|f| f.write(nokodoc.html)} 
b = Watir::Browser.new 
b.goto("file://#{Dir.pwd}/temp.html")