Ошибка Scrapyd при запуске scrapy spider

Question

Я пытаюсь развернуть гусеничный ход с четырьмя пауками. Один из пауков использует XMLFeedSpider и работает отлично от оболочки и scrapyd, но другие используют BaseSpider и все дают эту ошибку при запуске в scrapyd, но прекрасно работать из оболочки

TypeError: init() got an unexpected keyword argument '_job'

Из того, что я прочитал это указывает на проблему с функцией init у моих пауков, но я не могу решить эту проблему. Мне не нужна функция init, и если я полностью ее удалю, я все равно получаю ошибку!

Мой паук выглядит так

from scrapy import log 
from scrapy.spider import BaseSpider 
from scrapy.selector import XmlXPathSelector 
from betfeeds_master.items import Odds 
# Parameters 
MYGLOBAL = 39 
class homeSpider(BaseSpider): 
    name = "home" 
    #con = None 

    allowed_domains = ["www.myhome.com"] 
    start_urls = [ 
     "http://www.myhome.com/oddxml.aspx?lang=en&subscriber=mysubscriber", 
    ] 
    def parse(self, response): 

     items = [] 

     traceCompetition = "" 

     xxs = XmlXPathSelector(response) 
     oddsobjects = xxs.select("//OO[OddsType='3W' and Sport='Football']") 
     for oddsobject in oddsobjects: 
      item = Odds() 
      item['competition'] = ''.join(oddsobject.select('Tournament/text()').extract()) 
      if traceCompetition != item['competition']: 
       log.msg('Processing %s' % (item['competition']))    #print item['competition'] 
       traceCompetition = item['competition'] 
      item['matchDate'] = ''.join(oddsobject.select('Date/text()').extract()) 
      item['homeTeam'] = ''.join(oddsobject.select('OddsData/HomeTeam/text()').extract()) 
      item['awayTeam'] = ''.join(oddsobject.select('OddsData/AwayTeam/text()').extract()) 
      item['lastUpdated'] = '' 
      item['bookie'] = MYGLOBAL 
      item['home'] = ''.join(oddsobject.select('OddsData/HomeOdds/text()').extract()) 
      item['draw'] = ''.join(oddsobject.select('OddsData/DrawOdds/text()').extract()) 
      item['away'] = ''.join(oddsobject.select('OddsData/AwayOdds/text()').extract()) 

      items.append(item) 

     return items 

я могу положить использовать функцию инициализации в пауку, но я получаю точно такую ​​же ошибку.

def __init__(self, *args, **kwargs): 
    super(homeSpider, self).__init__(*args, **kwargs) 
    pass 

Почему это происходит и как его решить?

Answer 1

Хороший ответ был дан alecx:

Моя функция инициализации была:

def __init__(self, domain_name): 

Для того, чтобы работать в яйце для scrapyd, оно должно быть:

def __init__(self, domain_name, **kwargs): 

с учетом вы передаете имя домена в качестве обязательного аргумента