Насмешливый ImportError в Python

я пробую это уже почти два часа, безрезультатно.

у меня есть модуль, который выглядит так:

try:
    from zope.component import queryUtility  # and things like this
except ImportError:
    # do some fallback operations <-- how to test this?

далее в коде:

try:
    queryUtility(foo)
except NameError:
    # do some fallback actions <-- this one is easy with mocking 
    # zope.component.queryUtility to raise a NameError

какие идеи?

EDIT:

предложение Алекса, похоже, не работает:

>>> import __builtin__
>>> realimport = __builtin__.__import__
>>> def fakeimport(name, *args, **kw):
...     if name == 'zope.component':
...         raise ImportError
...     realimport(name, *args, **kw)
...
>>> __builtin__.__import__ = fakeimport

при выполнении тестов:

aatiis@aiur ~/work/ao.shorturl $ ./bin/test --coverage .
Running zope.testing.testrunner.layer.UnitTests tests:
  Set up zope.testing.testrunner.layer.UnitTests in 0.000 seconds.


Error in test /home/aatiis/work/ao.shorturl/src/ao/shorturl/shorturl.txt
Traceback (most recent call last):
  File "/usr/lib64/python2.5/unittest.py", line 260, in run
    testMethod()
  File "/usr/lib64/python2.5/doctest.py", line 2123, in runTest
    test, out=new.write, clear_globs=False)
  File "/usr/lib64/python2.5/doctest.py", line 1361, in run
    return self.__run(test, compileflags, out)
  File "/usr/lib64/python2.5/doctest.py", line 1282, in __run
    exc_info)
  File "/usr/lib64/python2.5/doctest.py", line 1148, in report_unexpected_exception
    'Exception raised:n' + _indent(_exception_traceback(exc_info)))
  File "/usr/lib64/python2.5/doctest.py", line 1163, in _failure_header
    out.append(_indent(source))
  File "/usr/lib64/python2.5/doctest.py", line 224, in _indent
    return re.sub('(?m)^(?!$)', indent*' ', s)
  File "/usr/lib64/python2.5/re.py", line 150, in sub
    return _compile(pattern, 0).sub(repl, string, count)
  File "/usr/lib64/python2.5/re.py", line 239, in _compile
    p = sre_compile.compile(pattern, flags)
  File "/usr/lib64/python2.5/sre_compile.py", line 507, in compile
    p = sre_parse.parse(p, flags)
AttributeError: 'NoneType' object has no attribute 'parse'



Error in test BaseShortUrlHandler (ao.shorturl)
Traceback (most recent call last):
  File "/usr/lib64/python2.5/unittest.py", line 260, in run
    testMethod()
  File "/usr/lib64/python2.5/doctest.py", line 2123, in runTest
    test, out=new.write, clear_globs=False)
  File "/usr/lib64/python2.5/doctest.py", line 1351, in run
    self.debugger = _OutputRedirectingPdb(save_stdout)
  File "/usr/lib64/python2.5/doctest.py", line 324, in __init__
    pdb.Pdb.__init__(self, stdout=out)
  File "/usr/lib64/python2.5/pdb.py", line 57, in __init__
    cmd.Cmd.__init__(self, completekey, stdin, stdout)
  File "/usr/lib64/python2.5/cmd.py", line 90, in __init__
    import sys
  File "<doctest shorturl.txt[10]>", line 4, in fakeimport
NameError: global name 'realimport' is not defined
, это тут работа, когда я запускаю тот же код из Python interactive приставка.

ФАЙЛЫ:

я использую zope.testing и тестовый файл, shorturl.txt это имеет все тесты, специфичные для этой части моего модуля. Сначала я импортирую модуль с zope.component доступно, чтобы продемонстрировать и проверить обычное использование. Отсутствие zope.* пакеты считаются edge-case, поэтому я тестирую его позже. Таким образом, я должен reload() мой модуль, после внесения zope.* недоступны, как-то.

до сих пор я даже пытался использовать tempfile.mktempdir() и пустой zope/__init__.py и zope/component/__init__.py файлы в tempdir, затем вставка tempdir в sys.path[0], и удаление старого zope.* пакеты sys.modules.

не работает.

ЕЩЕ БОЛЬШЕ РЕДАКТИРОВАТЬ:

тем временем я пробовал это:

>>> class NoZope(object):
...     def find_module(self, fullname, path):
...         if fullname.startswith('zope'):
...             raise ImportError
... 

>>> import sys
>>> sys.path.insert(0, NoZope())

и он хорошо работает для пространства имен набора тестов (= для всех импорта в shorturl.txt), но он не выполняется в моем основном модуле,ao.shorturl. Даже когда я ... --11--> он. Есть идеи почему?

>>> import zope  # ok, this raises an ImportError
>>> reload(ao.shorturl)    <module ...>

импорт zope.interfaces выдает ImportError, поэтому он не попадает в ту часть, где я импортирую zope.component и он остается в АО.пространство имен shorturl. Почему?!

>>> ao.shorturl.zope.component  # why?! 
<module ...>
6
doctest mocking python unit-testing zope.component

3 ответов

просто обезьяна в builtins свой вариант __import__ -- он может поднять все, что вы хотите, когда он распознает, что он вызывается на конкретных модулях, для которых вы хотите макетировать ошибки. См.документы для подробностях. Грубо:

try:
    import builtins
except ImportError:
    import __builtin__ as builtins
realimport = builtins.__import__

def myimport(name, globals, locals, fromlist, level):
    if ...:
        raise ImportError
    return realimport(name, globals, locals, fromlist, level)

builtins.__import__ = myimport

вместо ..., вы можете hardcode name == 'zope.component', или организовать вещи более гибко с обратным вызовом самостоятельно, что может сделать импорт поднять по требованию в разных случаях, в зависимости от вашего конкретного тестирование потребностей, не требуя от вас код несколько __import__-одинаковые функции;-).

обратите внимание также, что если то, что вы используете, вместо import zope.component или from zope.component import something, is from zope import component на name то будет 'zope' и 'component' будет тогда единственным элементом в fromlist.

редактировать: документы для __import__ функция говорит, что имя для импорта -builtin (как в Python 3), но на самом деле вам нужно __builtins__ -- я отредактировал код выше, чтобы он работал в любом случае.

9

это то, что я justed в моих unittests.

он использует PEP-302 "новые крючки импорта". (Предупреждение: документ PEP-302 и более краткие заметки о выпуске, которые я связал, не совсем точный.)

я использую meta_path потому что это как можно раньше в последовательности импорта.

если модуль уже импортирован (как в моем случае, потому что более ранние unittests издеваются над ним), то необходимо удалить его из sys.модули прежде чем делать reload на зависимом модуле.

Ensure we fallback to using ~/.pif if XDG doesn't exist.

 >>> import sys

 >>> class _():
 ... def __init__(self, modules):
 ...  self.modules = modules
 ...
 ...  def find_module(self, fullname, path=None):
 ...  if fullname in self.modules:
 ...   raise ImportError('Debug import failure for %s' % fullname)

 >>> fail_loader = _(['xdg.BaseDirectory'])
 >>> sys.meta_path.append(fail_loader)

 >>> del sys.modules['xdg.BaseDirectory']

 >>> reload(pif.index) #doctest: +ELLIPSIS
 <module 'pif.index' from '...'>

 >>> pif.index.CONFIG_DIR == os.path.expanduser('~/.pif')
 True

 >>> sys.meta_path.remove(fail_loader)

где код внутри pif.индекс выглядит так:

try:
    import xdg.BaseDirectory

    CONFIG_DIR = os.path.join(xdg.BaseDirectory.xdg_data_home, 'pif')
except ImportError:
    CONFIG_DIR = os.path.expanduser('~/.pif')

чтобы ответить на вопрос о том, почему недавно перезагруженный модуль имеет свойства старой и новой нагрузок, вот два примера файлов.

первый модуль y С случае сбоя импорта.

# y.py

try:
    import sys

    _loaded_with = 'sys'
except ImportError:
    import os

    _loaded_with = 'os'

второй -x который демонстрирует, как оставляя ручки для модуля может повлиять на его свойства при перезагрузке.

# x.py

import sys

import y

assert y._loaded_with == 'sys'
assert y.sys

class _():
    def __init__(self, modules):
        self.modules = modules

    def find_module(self, fullname, path=None):
        if fullname in self.modules:
            raise ImportError('Debug import failure for %s' % fullname)

# Importing sys will not raise an ImportError.
fail_loader = _(['sys'])
sys.meta_path.append(fail_loader)

# Demonstrate that reloading doesn't work if the module is already in the
# cache.

reload(y)

assert y._loaded_with == 'sys'
assert y.sys

# Now we remove sys from the modules cache, and try again.
del sys.modules['sys']

reload(y)

assert y._loaded_with == 'os'
assert y.sys
assert y.os

# Now we remove the handles to the old y so it can get garbage-collected.
del sys.modules['y']
del y

import y

assert y._loaded_with == 'os'
try:
    assert y.sys
except AttributeError:
    pass
assert y.os
3

Если вы не против изменить саму программу, вы также можете поместить вызов импорта в функцию и исправить это в своих тестах.

0