Повторное подключение MySQL к тайм-ауту

Question

У меня есть программа на Python, которая работает на фоне в течение нескольких недель и периодически выполняет запросы к базе данных. Для этого я использую ORM peewee (версия 2.2.1). Я использую MySQL в качестве бэкэнд.

В последнее время я столкнулся с повторяющейся проблемой при доступе к БД, как правило, после нескольких дней работы программы. Ошибка, которая поднятый peewee является

peewee.OperationalError: (2006, 'MySQL server has gone away') 

отслеживающий глубоко в peewee. Я отправляю его здесь, но, как мой virtualenv делает имена файлов слишком долго, я их укорочения:

File ".../local/lib/python2.7/site-packages/peewee.py", line 2910, in save 
    ret_pk = self.insert(**field_dict).execute() 
    File ".../local/lib/python2.7/site-packages/peewee.py", line 2068, in execute 
    return self.database.last_insert_id(self._execute(), self.model_class) 
    File ".../local/lib/python2.7/site-packages/peewee.py", line 1698, in _execute 
    return self.database.execute_sql(sql, params, self.require_commit) 
    File ".../local/lib/python2.7/site-packages/peewee.py", line 2232, in execute_sql 
    self.commit() 
    File ".../local/lib/python2.7/site-packages/peewee.py", line 2104, in __exit__ 
    reraise(new_type, new_type(*exc_value.args), traceback) 
    File ".../local/lib/python2.7/site-packages/peewee.py", line 2223, in execute_sql 
    res = cursor.execute(sql, params or()) 
    File ".../local/lib/python2.7/site-packages/MySQLdb/cursors.py", line 205, in execute 
    self.errorhandler(self, exc, value) 
    File ".../local/lib/python2.7/site-packages/MySQLdb/connections.py", line 36, in defaulterrorhandler 
    raise errorclass, errorvalue 
peewee.OperationalError: (2006, 'MySQL server has gone away') 

Возможные попытки файлик:

• В this question, один из комментариев рекомендуем pinging серверу MySQL время от времени, чтобы сохранить его (соединение?) вживую. Я не уверен, как это сделать через ORM. (должен я просто SELECT 1 каждый час, скажем?)
• В this github peewee issue, который был открыт 4 месяца назад, указана одна и та же ошибка, хотя там утверждается, что он решен (и я использую более новую версию).
• В 7 year old issue из trac, одно из предложений заключается в увеличении таймаута MySQL на 3 дня.
• В этом forum discussion предлагается вариант увеличения времени ожидания MySQL, но предлагается альтернатива «использования опции autoReconnect для соединителя JDBC MySQL». Я попытался выяснить, существует ли такая опция для модуля MySQLdb Python, но не удалось найти.
• Я нашел это MySQL reference page о поведении повторного подключения, но это немного сложно для моего понимания MySQL (обычно я работаю только с ОРМ), и я не знаю, как его применить от peewee.

Даже если я могу выполнить ping-базу данных, чтобы поддерживать связь в течение более длительного периода времени, я считаю, что считается плохой практикой поддерживать связь, когда она действительно не нужна. Есть ли способ возобновить соединение через ORM? Я рассматриваю как pinging, так и увеличение тайм-аута MySQL в качестве обходных путей, в то время как реальным решением было бы повторно подключиться, когда это необходимо (и реальное решение - это то, о чем я прошу).

Answer 1

Вы должны поймать исключение и на основе какой ошибки, повторно подключиться или сделать что-то еще. Является ли это тайм-аут подключения или проблема с сетью или MySQL, необходимо перезапустить.

Код ниже (псевдоним) показывает, как вы могли это сделать, но есть еще что-то. Вы захотите попробовать несколько раз, а затем выручить или попробовать каждые две минуты или около того.

while True: 
    try: 
     # do your database stuff 
    except peewee.OperationalError as exc: 
     # Oops! We have to try to reconnect 

Не имеет значения, используете ли вы ORM или нет. Однако ORM может предложить эту функцию.

Answer 2

Я разрешил эту проблему.

Мое решение использует пул соединений mysql PooledMySQLDatabase от playhouse.pool.

пожалуйста, прочитайте: https://github.com/coleifer/peewee/issues/239

from peewee import * 
from playhouse.pool import * 

Answer 3

У меня была такая же проблема, и для Peewee с помощью MySQLDb я получил следующее решение при инициализации экземпляра базы данных MySQL:

db = MySQLDatabase(db_name, user=db_username, passwd=db_password, host=db_host, port=db_port) 
db.get_conn().ping(True) 

где для функции пинг там is:

Проверяет, связано ли соединение с сервером w orking. Если он опустился до , произойдет автоматическое повторное соединение.

Эта функция может использоваться клиентами, которые не работают в течение длительного времени , в то время как для проверки того, закрыл ли сервер соединение и при необходимости снова подключится.

Новое в 1.2.2: принимает необязательный параметр повторного подключения. Если True, то клиент попытается пересоединение. Обратите внимание, что этот параметр равен persistent. По умолчанию это включено в MySQL < 5.0.3 и после этого.

Нестандартные. Вы должны предположить, что ping() выполняет неявный откат ; использовать только при запуске новой транзакции. Вы были предупреждены .

в документе db.get_conn().ping.__doc__. Помните, что db.get_conn().ping(True) необходимо использовать, если вы снова создаете другое соединение. Поэтому, если вы снова подключитесь (например, через db.connect()), вы должны повторить пинг.