Scrapy - использовать прокси-сервер, но отключить прокси-сервер для определенных запросов.

Question

Я хочу использовать прокси-промежуточное программное обеспечение в своей Scrapy, но не для каждого запроса нужен прокси-сервер. Я не хочу злоупотреблять использованием прокси и запрещать прокси-серверу.

Есть ли способ отключить прокси-сервер в некоторых запросах при включении промежуточного программного обеспечения прокси-сервера?

Answer 1

Это docs.

Вы можете установить мета-ключ proxy по запросу, например, http://some_proxy_server:port.