scrapyd

2зной

1ответ

pymongo.errors.ConnectionFailure: тайм-аут от экземпляра убунту ec2 работает scrapyd

Итак ... Я бегу scrapyd на моем Ubuntu например ec2 после выполнения этого поста: http://www.dataisbeautiful.io/deploying-scrapy-ec2/ однако я предполагаю, что я не могу получить PyMongo для подключен

0зной

1ответ

Scrapy на AWS EC2: где писать предметы?

У меня есть рабочий паук на моей локальной машине, которая записывает элементы в локальную базу данных postgres. Теперь я пытаюсь запустить тот же паук через scrapyd на экземпляр EC2. Это явно не сраб

0зной

2ответ

scrapyd: локон ошибка `неизвестен или поврежден egg`

I'am пытается обновить версию моего паука, я писал: curl http://localhost:6800/addversion.json -d project=comicvn -d spider=comicvn2 -d version= 141667324 -d egg=14116674324.egg Он сделал ошибку: {"st

2зной

1ответ

scrapyd shared middleware и код конвейера

У меня есть несколько проектов, которые я развернул для экземпляра scrapyd. Все они, как правило, используют один и тот же код промежуточного программного обеспечения, который я создал, и что я дублир