SCRAPY пропускает XPaths где XPath содержит CP1251

Question

Fk сумасшедший редактор = _ + http://dpaste.com/1035040/ ## КОД здесь

#

Значения отклика:

{'articul': [u'testetete'], 
    'diametr': ['Empty'], 
    'image': [u'/foto/11.20.jpg'], 
    'name': [u'Трололололо'], 
    'url': ['http://test.ru/goods/detali.html?product_id=20']} 

где другие поля?

#

items.py:

http://dpaste.com/1035050/

Answer 1

Это потому, что add_xpath метод получает XPath в качестве единственного аргумента. Если вам нужно добавить еще один (например, «Масса» или «Состав»), чтобы оценить, что паук принимает из xpath, вы можете добавить его в pipelines.py или в другой модуль, который принимает результаты от Spider.