В python, как вы можете разгрузить сгенерированные классы

Question

Я работаю над библиотекой, которая загружает файлы (hfd5 - pytables) в структуру объекта. Фактические классы используются для структуры загружается в виде строки из файла hdf5, а затем загружен таким образом:

class NamespaceHolder(dict): 
    # stmt is the source code holding all the class defs 
    def execute(self, stmt): 
     exec stmt in self 

Проблема, загрузка нескольких классов, как это, заставляет объекты появляться в невозвратные часть коллекции мусора, а именно фактические определения классов. Я также могу загрузить это в глобальный словарь, но проблема остается в сиротских классах. Есть ли способ разгрузить классы?

Основная проблема - класс. mro атрибут, который содержит ссылку на сам класс, вызывая круговые ссылки, которые сборщик мусора не может обрабатывать.

Вот небольшой тест, чтобы увидеть для себя:

import gc 

if __name__ == "__main__": 
    gc.enable() 
    gc.set_debug(gc.DEBUG_LEAK) 

    code = """ 
class DummyA(object): 
    pass 
""" 
    context = {} 

    exec code in context 
    exec code in context 

    gc.collect() 
    print len(gc.garbage) 

Только примечание: я уже приводил доводы против использования разбора от текста в файле для создания классов ранее, но, видимо, они настроены на использование это здесь и увидеть некоторые преимущества, которых я не знаю, поэтому уйти от этого решения сейчас не представляется возможным.

Answer 1

gc.set_debug (gc.DEBUG_LEAK) вызывает утечку. Попробуйте следующее:

import gc 

def foo():        
    code = """ 
class DummyA(object): 
    pass    
""" 
    context = {} 
    exec code in context 
    exec code in context 

    gc.collect() 
    print len(gc.garbage), len(gc.get_objects()) 

gc.enable() 
foo(); foo() # amount of objects doesn't increase 
gc.set_debug(gc.DEBUG_LEAK) 
foo() # leaks 

Answer 2

Я думаю, что GC может справиться с циклическими ссылками, однако вам нужно сделать, это удалить ссылку из глобал() ДИКТ:

try: 
    del globals()['DummyA'] 
except KeyError: 
    pass 

иначе будет некруглая ссылка на объект класса, который остановит его очистку.