Есть ли у кого-нибудь пример для хранения данных обхода из scrapy в MySQLdb с использованием Peewee?

Question

Я новичок в Scrapy. У меня есть Googled вокруг и поиск в Stack Overflow, но нет точных вещей, которые я хочу сделать. Я боролся с ними в течение двух дней.

Это то, что я получил до сих пор для pipelines.py. Кто-нибудь отметит, что с ним не так, или покажите мне пример кода для подключения Scrapy к MySQLdb с помощью Peewee?

from MySQLdb import * 
from peewee import * 


mysql_db = MySQLDatabase('nasdaq_db', user='root', passwd='') 

class Quote(Model): 
    """A base model that will use our MySQL database""" 
    time = CharField() 
    price = CharField() 
    volume = CharField() 
    class Meta: 
     database = mysql_db 


db.connect() 
Quote.create_table() 

class RealTimeQuotePipeline(object): 
    def process_item(self, item, spider): 
     item = Quote(time=item['time'], price=item['price'], volume=['volume']) 
     item.save() 

Пробег:

scrapy crawl nasdaq 

Сообщение об ошибке:

peewee.OperationalError: (1049, "Unknown database 'nasdaq_db'") 

Если изменить его на:

mysql_db = MySQLDatabase(db='nasdaq_db', user='root', passwd='') 

Существует еще одно сообщение об ошибке:

TypeError: __init__() takes at least 2 arguments (1 given) 

Answer 1

Вы должны быть уверены, что база данных nasdaq_db существует в вашем экземпляре mysql. Вы можете открыть mysql и запустить:

create database nasdaq_db; 

Тогда вы должны быть в состоянии подключиться. У вас был правильный синтаксис в первый раз:

db = MySQLDatabase('nasdaq_db', user='root', passwd='')