screen-scraping

1зной

2ответ

Доступ к элементам веб-страницы, которая постоянно изменяется с помощью Python

Привет всем! У меня есть определенный вопрос, который задают сегодня, как я могу очистить данные с постоянно изменяющегося веб-сайта, например, сайт онлайн-азартных игр. Когда я выполняю этот код, кот

0зной

1ответ

перебирать и использовать HTML-файлы в каталоге - python

Мне нужно перебирать файлы .html в данный каталог и удалять данные из них. Пока это мой код, как я могу получить доступ к скрипту внутри? import os directory ='/Users/xxxxx/Documents/sample/' for fi

1зной

1ответ

Как выполнить функцию, после того, как проскальзывание выполняется в режиме scrapy?

Функция spider_closed() не работает. Если я даю только инструкцию печати, она печатает, но если я выполняю вызов любой функции и возвращаю значение, оно не работает. import scrapy import re from pyd

1зной

1ответ

Добавить URL ссылки источника на веб-скребковые данные в R

У меня есть ссылки, которые мне нужно очистить. Как я могу добавить эти адреса ссылок в скребковые данные как переменные или просто добавить? links for (i in links) { url<- (i) SC <-

1зной

1ответ

Невозможно выбрать элемент с веб-страницы javascript с помощью Python scrapy и Selenium

Я пытаюсь создать приложение, которое собирает некоторые данные. Я использую Python 2.7 с Scrapy и Selenium в Windows 10. Я делал это только с несколькими веб-страницами ранее, однако я не могу выбрат

0зной

1ответ

Относительная разбивка по страницам XPath для ASP сгенерированных результатов без следующей кнопки [Octoparse]

Я пытаюсь очистить правительственный сайт, который выполняет результаты с разбивкой по страницам без следующей кнопки в Octoparse. Example of the Pagination Есть не-грязный способ форматирования относ

0зной

1ответ

Как очистить данные из таблицы Документов Google на этой веб-странице?

Я пытаюсь использовать Python для очистки данных из таблицы на этой веб-странице. http://www.dividendyieldhunter.com/exchanged-traded-debt-issues-sorted-alphabetically/ Я попытался с помощью запросов

1зной

1ответ

Web Зачистка с Python: красивый суп: BS4: <h1>Ошибка 200 OK</h1>

Я использую Python 3 и я пытаюсь просто загрузить содержимое веб-сайта следующим образом: # IMPORTS -------------------------------------------------------------------- import urllib.request from bs

1зной

1ответ

Python3 Подключение сброса одноранговой

urllib.error.URLError urlopen ошибка [Errno 54] сброс соединения одноранговой Я получил эту ошибку при попытке извлечь notino.com. Я думаю, что парень использовал какой-то умный способ предотвратить с