Проблемы с pkgutil.iter_modules() в Windows

Question

Я пытаюсь динамически импортировать модули Python, которые соответствуют шаблону во время выполнения. Модули расположены внутри пакета Python.

Функция я использую, чтобы найти модули является:

def load_modules_from_dir(dirname, pattern=""): 
    modules = [] 
    for importer, package_name, _ in pkgutil.iter_modules([dirname]): 
     if re.search(pattern, package_name): 
      full_package_name = '%s.%s' % (dirname, package_name) 
      if full_package_name not in sys.modules: 
       module = importer.find_module(package_name).load_module(full_package_name) 
       modules.append(module) 
    return modules 

Я называю это следующим образом:

module_dir = os.path.join(os.path.dirname(__file__)) 
modules = utils.load_modules_from_dir(module_dir, "jscal$") 

В Linux находит все модули, но на Windows, он не находит ни одного модулей вообще. Если я напечатаю dirname в функции load_modules_from_dir, я получаю: H:\temp\linx\dist\calibrate\dcljscal

Я воспроизвел его в оболочке Python на Windows и прибил его к разделителю пути. Следующие ничего не находит:

>>> for x in pkgutil.iter_modules(['H:\temp\linx\dist\calibrate\dcljscal']):print x 
... 
>>> 

Если я заменить разделитель пути для Windows с Linux один, он работает:

>>> for x in pkgutil.iter_modules(['H:/temp/linx/dist/calibrate/dcljscal']):print x 
... 
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'demojscal', True) 
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'dx2cremjscal', True) 
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'linxjscal', True) 
>>> 

Это также работает, если я заменю \ с \\, в основном спасаясь разделитель пути для Windows :

>>> for x in pkgutil.iter_modules(['H:\\temp\\linx\\dist\\calibrate\\dcljscal']):print x 
... 
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'demojscal', True) 
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'dx2cremjscal', True) 
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'linxjscal', True) 
>>> 

кажется, что путь, порожденный os.path.join(os.path.dirname(__file__)) не является портативным.
Я бы ожидал, что os.path.join() дал бы мне правильный путь, который я могу использовать без изменений в pkgutil.iter_modules(). Что я здесь делаю неправильно?

Я использую Python 2.7.11 для Windows XP.

Answer 1

Короткий ответ: ответа на эту проблему нет. Строки, представляющие имена путей, всегда могут содержать специальные символы, которые могут вас укусить в любое время.

Существует много сообщений SE, которые пытаются дать решение. Большинство из них фиксируют специальный случай и вообще не работают. Консенсуса относительно наилучшего подхода нет. См:
- Unpredictable results from os.path.join in windows
- Python windows path slash
- Path Separator in Python 3
- Windows path in python
- mixed slashes with os.path.join on windows
- Why not os.path.join use os.path.sep or os.sep?

Этот блог также стоит упомянуть, потому что автор использует несколько иной подход, чтобы принести его через точку : backslashes-in-windows-filenames

Прагматичным способом обработки имен путей является замена Разделитель путей Windows с одним Linux: path_name = path_name.replace('\\', '/')
У Python на Windows XP и более поздних версиях Windows нет проблем с C:/tab/newline/return/012/x012.

Только при печати или записи пути вы можете использовать os.path.normpath() для преобразования пути к представлению ОС или платформы, на которой запущен Python.