как просканировать страницу, чья ссылка скрыта до щелчка

Question

Я хочу получить данные страницы, на которую нужно щелкнуть ссылку.

Я попытался захватить поле ссылки с помощью искателя и экстрактора с проверкой столбца как ссылкой и html. но он не возвращает фактическую ссылку. только после того, как я нажму ссылку, откроется всплывающее окно, откуда я хочу данные. Каждая целевая страница содержит около 50 таких ссылок. Я хочу просканировать каждую из этих ссылок.

Я попробовал это с разъемом, но все становится сложным, так как есть около 90 тыс. Запросов. Кроме того, соединитель не возвращает URL страницы, которая была бы полезна.

Answer 1

Извлечение этих данных действительно зависит от веб-сайта. Импорт не позволяет извлекать данные из всплывающих окон. Но извлечение пути ссылки может быть возможным, в зависимости от структуры веб-сайта. Если вы не можете извлечь данные с помощью инструмента, я бы предложил использовать xpath для получения пути к ссылке.

Для этого перейдите на страницу, на которой вы хотите получить эти данные, щелкните правой кнопкой мыши и выберите «проверить элемент». Выберите путь ссылки на странице, щелкните правой кнопкой мыши и выберите «select xpath». Вернитесь к своему экстрактору и выберите значок «расширенные настройки» и вставьте свой xpath. Опять же, это может не сработать, поскольку оно зависит от того, как он структурирован на веб-сайте, но все же стоит попробовать.

Спасибо,
Meg