Определить каталог загрузки для седана хромидра с питоном

Question

Все в заголовке!

Есть ли способ определить каталог загрузки для selenium-chromedriver, используемый с python?

Несмотря на многочисленные исследования, я не нашел ничего убедительного ... Как новичок, я многое видел о «желаемых возможностях» или «вариантах» для Chromedriver, но ничто не разрешило мою проблему. .. (и я до сих пор не знаю, будет ли это!)

Чтобы объяснить немного больше моей проблемы: У меня есть много url для сканирования (200 000) и для каждого URL-файла для загрузки. Мне нужно создать таблицу с url, информацию, которую я сломал на ней, и имя файла, который я только что загрузил для каждой веб-страницы. С объемом, который я должен обработать, я создал потоки, которые открывают несколько экземпляров хромированного ребра, чтобы ускорить обработку. Проблема заключается в том, что каждый загруженный файл поступает в тот же каталог по умолчанию, и я больше не могу связать файл с url ... Итак, идея состоит в том, чтобы создать каталог загрузки для каждого потока, чтобы управлять им одним один.

Если у кого-то есть ответ на мой вопрос в заголовке ИЛИ обходной путь, чтобы определить загруженный файл и связать его с текущим URL-адресом, я буду благодарен!

Answer 1

Для chromedriver1 создайте новый профиль и внутри этого профиля установите download.default_directory в нужное место и задайте этот профиль для хрома, используя chrome.profile. Пакет selenium-chromedriver должен иметь некоторые методы для создания новых профилей (по крайней мере, с рубином), так как им нужна специальная обработка.

Chromedriver2 не поддерживает настройку профиля. Вы можете установить с ним предпочтения. Если вы хотите установить каталог загрузки это, как вы это делаете:

prefs: { download: { default_directory: "/tmp" } } 

рубин селеном WebDriver не поддерживает эту функцию, тем не менее, вариант питон может сделать, однако.

Answer 2

Я столкнулся с той же проблемой. Пробовал много решений, найденных в Интернете, никто не помогал. Так что в конце концов я пришел к этому:

• Launch хром с пустым пользовательскими данными-каталогом (в/папке TMP), чтобы хром инициализировать его
• Выходом Chrome

• ИЗМЕНЯЕТ по умолчанию/Preferences во вновь созданного пользователя -data-Dir, добавить эти поля в корневой объект (просто пример):

  "скачать": { " default_directory": "/tmp/tmpX7EADC.downloads", "directory_upgrade": правда }

• Launch хром снова с тем же пользовательским данным-Dir

Теперь она работает просто отлично.

Еще один совет: если вы не знаете имя файла файла, которое будет загружено, создайте моментальный снимок (список файлов) каталога загрузки, затем загрузите файл и найдите его имя путем сравнения моментального снимка и текущего списка файлов в каталоге загрузки.

Answer 3

Пожалуйста, попробуйте следующий код ....

System.setProperty("webdriver.chrome.driver", "/path/to/chromedriver"); 
String downloadFilepath = "/path/to/download"; 
HashMap<String, Object> chromePrefs = new HashMap<String, Object>(); 
chromePrefs.put("profile.default_content_settings.popups", 0); 
chromePrefs.put("download.default_directory", downloadFilepath); 
ChromeOptions options = new ChromeOptions(); 
HashMap<String, Object> chromeOptionsMap = new HashMap<String, Object>(); 
options.setExperimentalOptions("prefs", chromePrefs); 
options.addArguments("--test-type"); 
DesiredCapabilities cap = DesiredCapabilities.chrome(); 
cap.setCapability(ChromeOptions.CAPABILITY, chromeOptionsMap); 
cap.setCapability(CapabilityType.ACCEPT_SSL_CERTS, true); 
cap.setCapability(ChromeOptions.CAPABILITY, options); 
WebDriver driver = new ChromeDriver(cap);