scrapy-spider

1зной

1ответ

Scrapy паук содержание обрывки частично и оставляя другие

У меня есть SCRAPY паук определен, он может ломом все имена и некоторые storiesand в XPATH definded не может захватить истории, от https://www.cancercarenorthwest.com/survivor-stories, # -*- coding: u

1зной

1ответ

Python LinkExtractor для перехода на следующие страницы не работает

Следующая часть кода мне нужно попробовать обходить сайт с более чем одной страницей ... У меня возникают проблемы с получением класса правил. Что я делаю не так? #import scrapy from scrapy.spiders i

3зной

2ответ

Scrap handle 302 код ответа

Я использую простую реализацию CrawlSpider для обхода веб-сайтов. По умолчанию Scrapy следует за 302 перенаправлением в целевые местоположения и видом игнорирует первоначально запрошенную ссылку. На к

3зной

2ответ

Scrapy: Выберите тег с неразрывный пробел с помощью XPath

В моем Scrapy паука, я хочу, чтобы выбрать только <p> с содержанием текста: item['Description'] = response.xpath('//*[@id="textepresentation"]//p[string(.)]').extract() Он отлично работает, но, к со

2зной

1ответ

scrapy: Можно ли получить форму запроса от ответа?

Я использую scrapy для очистки некоторых данных, мне интересно, сколько данных из Request the Response магазины. Мой конкретный вопрос показан в следующем коде: def parse(self,response): r = Form

0зной

1ответ

Может ли парсер сеанса коллации вызывать другой парсер и отправлять ответ без нового запроса?

Я новичок в использовании scrapy. Может ли кто-нибудь рассказать, как я могу сделать следующий код работы? В моем пауке он останавливается на parse1. Спасибо! def parse1(self,response): response.