Содержание страницы
26.5. unittest.mock – начало работы¶unittest.mock – getting started
Новое в версии 3.3.
26.5.1. Использование Mock¶Using Mock
26.5.1.1. Подмена методов с помощью Mock¶Mock Patching Methods
Типичные случаи использования объектов Mock:
- Подмена методов
- Запись вызовов методов объектов
Возможно, потребуется заменить метод объекта, чтобы проверить, что другая часть системы вызывает его с правильными аргументами:
>>> real = SomeClass()
>>> real.method = MagicMock(name='method')
>>> real.method(3, 4, 5, key='value')
<MagicMock name='method()' id='...'>
После того как наш mock был использован (real.method в этом примере), у него появляются методы и атрибуты, позволяющие делать утверждения о том, как он был использован.
Примечание
В большинстве этих примеров классы Mock и MagicMock взаимозаменяемы. Поскольку MagicMock – более функциональный класс, его разумно использовать по умолчанию.
После вызова mock его атрибут called устанавливается в True. Что более важно, можно использовать метод assert_called_with() или assert_called_once_with(), чтобы проверить, что он был вызван с правильными аргументами.
В этом примере проверяется, что вызов ProductionClass().method приводит к вызову метода something:
>>> class ProductionClass:
... def method(self):
... self.something(1, 2, 3)
... def something(self, a, b, c):
... pass
...
>>> real = ProductionClass()
>>> real.something = MagicMock()
>>> real.method()
>>> real.something.assert_called_once_with(1, 2, 3)
26.5.1.2. Mock для вызовов методов объекта¶Mock for Method Calls on an Object
В последнем примере мы напрямую подменили метод объекта, чтобы проверить, что он был вызван корректно. Другой типичный случай – передать объект в метод (или какую-то часть тестируемой системы), а затем проверить, что он используется правильным образом.
У простого класса ProductionClass ниже есть метод closer. Если его вызвать с объектом, то он вызовет close у этого объекта.
>>> class ProductionClass:
... def closer(self, something):
... something.close()
...
Поэтому для тестирования нужно передать объект с методом close и проверить, что он был вызван правильно.
>>> real = ProductionClass()
>>> mock = Mock()
>>> real.closer(mock)
>>> mock.close.assert_called_with()
Нам не нужно ничего делать, чтобы предоставить метод 'close' в нашем mock. Обращение к close создаёт его. Поэтому, если close ещё не был вызван, обращение к нему в тесте создаст его, но assert_called_with() вызовет исключение.
26.5.1.3. Подмена классов¶Mocking Classes
Типичный сценарий – подменить классы, которые инстанциируются тестируемым кодом. При подмене класса он заменяется mock. Экземпляры создаются вызовом класса. Это значит, что «экземпляр mock» доступен через возвращаемое значение подменённого класса.
В примере ниже есть функция some_function, которая создаёт экземпляр Foo и вызывает его метод. Вызов patch заменяет класс Foo на mock. Экземпляр Foo – это результат вызова mock, поэтому он настраивается через изменение return_value у mock.
>>> def some_function():
... instance = module.Foo()
... return instance.method()
...
>>> with patch('module.Foo') as mock:
... instance = mock.return_value
... instance.method.return_value = 'the result'
... result = some_function()
... assert result == 'the result'
26.5.1.4. Именование заглушек¶Naming your mocks
Полезно давать вашим mock имена. Имя отображается в repr mock и может помочь, когда mock фигурирует в сообщениях об ошибках тестов. Имя также распространяется на атрибуты и методы mock:
>>> mock = MagicMock(name='foo')
>>> mock
<MagicMock name='foo' id='...'>
>>> mock.method
<MagicMock name='foo.method' id='...'>
26.5.1.5. Отслеживание всех вызовов¶Tracking all Calls
Часто требуется отследить не один вызов метода, а несколько. Атрибут mock_calls записывает все вызовы дочерних атрибутов mock, а также их потомков.
>>> mock = MagicMock()
>>> mock.method()
<MagicMock name='mock.method()' id='...'>
>>> mock.attribute.method(10, x=53)
<MagicMock name='mock.attribute.method()' id='...'>
>>> mock.mock_calls
[call.method(), call.attribute.method(10, x=53)]
Если сделать утверждение о mock_calls, а были вызваны какие-то неожиданные методы, то утверждение не пройдёт. Это полезно, поскольку помимо проверки того, что ожидаемые вызовы были сделаны, также проверяется, что они были сделаны в правильном порядке и без дополнительных вызовов:
Для создания списков для сравнения с mock_calls используется объект call:
>>> expected = [call.method(), call.attribute.method(10, x=53)]
>>> mock.mock_calls == expected
True
26.5.1.6. Установка возвращаемых значений и атрибутов¶Setting Return Values and Attributes
Установка возвращаемых значений для mock-объекта очень проста:
>>> mock = Mock()
>>> mock.return_value = 3
>>> mock()
3
Конечно, то же самое можно сделать для методов mock:
>>> mock = Mock()
>>> mock.method.return_value = 3
>>> mock.method()
3
Возвращаемое значение также можно задать в конструкторе:
>>> mock = Mock(return_value=3)
>>> mock()
3
Если требуется задать атрибут на mock, сделайте это:
>>> mock = Mock()
>>> mock.x = 3
>>> mock.x
3
Иногда нужно смоделировать более сложную ситуацию, например, mock.connection.cursor().execute(“SELECT 1”). Если требуется, чтобы этот вызов возвращал список, то необходимо настроить результат вложенного вызова.
Можно использовать call для построения набора вызовов в виде «цепочки вызовов», как здесь, для последующей простой проверки:
>>> mock = Mock()
>>> cursor = mock.connection.cursor.return_value
>>> cursor.execute.return_value = ['foo']
>>> mock.connection.cursor().execute("SELECT 1")
['foo']
>>> expected = call.connection.cursor().execute("SELECT 1").call_list()
>>> mock.mock_calls
[call.connection.cursor(), call.connection.cursor().execute('SELECT 1')]
>>> mock.mock_calls == expected
True
Именно вызов .call_list() превращает наш объект вызова в список вызовов, представляющих цепочку вызовов.
26.5.1.7. Вызов исключений с помощью заглушек¶Raising exceptions with mocks
Полезный атрибут – side_effect. Если задать ему класс исключения или экземпляр, то при вызове mock будет возбуждаться это исключение.
>>> mock = Mock(side_effect=Exception('Boom!'))
>>> mock()
Traceback (most recent call last):
...
Exception: Boom!
26.5.1.8. Функции и итерируемые объекты в side_effect¶Side effect functions and iterables
side_effect также можно задать в виде функции или итерируемого объекта. Сценарий использования side_effect как итерируемого объекта: mock будет вызван несколько раз, и каждый вызов должен возвращать другое значение. Если задать side_effect как итерируемый объект, то каждый вызов mock будет возвращать следующее значение из этого итерируемого объекта:
>>> mock = MagicMock(side_effect=[4, 5, 6])
>>> mock()
4
>>> mock()
5
>>> mock()
6
Для более сложных сценариев, например, динамического изменения возвращаемых значений в зависимости от того, с чем вызывается mock, side_effect может быть функцией. Функция будет вызвана с теми же аргументами, что и mock. Возвращаемое функцией значение станет результатом вызова:
>>> vals = {(1, 2): 1, (2, 3): 2}
>>> def side_effect(*args):
... return vals[args]
...
>>> mock = MagicMock(side_effect=side_effect)
>>> mock(1, 2)
1
>>> mock(2, 3)
2
26.5.1.9. Создание mock на основе существующего объекта¶Creating a Mock from an Existing Object
Одна из проблем чрезмерного использования mock-объектов в том, что это привязывает тесты к реализации самих mock-объектов, а не к реальному коду. Предположим, есть класс, реализующий some_method. В тесте для другого класса вы предоставляете mock этого объекта, который также предоставляет some_method. Если впоследствии вы рефакторите первый класс так, что у него больше нет some_method, то тесты продолжат проходить, хотя код уже сломан!
Mock позволяет предоставить объект в качестве спецификации для mock, используя ключевой аргумент spec. Обращение к методам/атрибутам mock, которых нет в объекте спецификации, сразу вызовет ошибку атрибута. Если изменить реализацию спецификации, то тесты, использующие этот класс, начнут немедленно падать, без необходимости создавать экземпляр класса в этих тестах.
>>> mock = Mock(spec=SomeClass)
>>> mock.old_method()
Traceback (most recent call last):
...
AttributeError: object has no attribute 'old_method'
Если нужна более строгая форма спецификации, запрещающая как установку произвольных атрибутов, так и их получение, можно использовать spec_set вместо spec.
26.5.2. Декораторы patch¶Patch Decorators
Примечание
При использовании patch важно подменять объекты в том пространстве имён, где они ищутся. Обычно это очевидно, но для краткого руководства прочитайте где подменять.
Частая потребность в тестах – подменить атрибут класса или модуля, например, встроенную функцию или класс в модуле, чтобы проверить, что он инстанциируется. Модули и классы по сути глобальны, поэтому подмену на них нужно отменять после теста, иначе она останется и в других тестах, вызывая труднодиагностируемые проблемы.
mock предоставляет три удобных декоратора для этого: patch, patch.object и patch.dict. patch принимает одну строку вида package.module.Class.attribute, чтобы указать атрибут, который нужно подменить. Также он опционально принимает значение, на которое нужно заменить атрибут (или класс и т.д.). ‘patch.object’ принимает объект и имя атрибута, который нужно подменить, плюс опционально значение для подмены.
patch.object:
>>> original = SomeClass.attribute
>>> @patch.object(SomeClass, 'attribute', sentinel.attribute)
... def test():
... assert SomeClass.attribute == sentinel.attribute
...
>>> test()
>>> assert SomeClass.attribute == original
>>> @patch('package.module.attribute', sentinel.attribute)
... def test():
... from package.module import attribute
... assert attribute is sentinel.attribute
...
>>> test()
Если вы подменяете модуль (включая builtins), то используйте patch вместо patch.object:
>>> mock = MagicMock(return_value=sentinel.file_handle)
>>> with patch('builtins.open', mock):
... handle = open('filename', 'r')
...
>>> mock.assert_called_with('filename', 'r')
>>> assert handle == sentinel.file_handle, "incorrect file handle returned"
Имя модуля может быть точечным, в форме package.module, если необходимо:
>>> @patch('package.module.ClassName.attribute', sentinel.attribute)
... def test():
... from package.module import ClassName
... assert ClassName.attribute == sentinel.attribute
...
>>> test()
Удобный подход – декорировать непосредственно сами тестовые методы:
>>> class MyTest(unittest2.TestCase):
... @patch.object(SomeClass, 'attribute', sentinel.attribute)
... def test_something(self):
... self.assertEqual(SomeClass.attribute, sentinel.attribute)
...
>>> original = SomeClass.attribute
>>> MyTest('test_something').test_something()
>>> assert SomeClass.attribute == original
Если нужно подменить с помощью Mock, можно использовать patch с одним аргументом (или patch.object с двумя аргументами). Mock будет создан автоматически и передан в тестовую функцию/метод:
>>> class MyTest(unittest2.TestCase):
... @patch.object(SomeClass, 'static_method')
... def test_something(self, mock_method):
... SomeClass.static_method()
... mock_method.assert_called_with()
...
>>> MyTest('test_something').test_something()
Можно накладывать несколько декораторов патча, используя такой шаблон:
>>> class MyTest(unittest2.TestCase):
... @patch('package.module.ClassName1')
... @patch('package.module.ClassName2')
... def test_something(self, MockClass2, MockClass1):
... self.assertIs(package.module.ClassName1, MockClass1)
... self.assertIs(package.module.ClassName2, MockClass2)
...
>>> MyTest('test_something').test_something()
При вложении декораторов patch mocks передаются в декорированную функцию в том же порядке, в каком они применяются (обычный python порядок применения декораторов). То есть снизу вверх, поэтому в примере выше mock для test_module.ClassName2 передаётся первым.
Существует также patch.dict() для установки значений в словаре только в пределах области видимости с последующим восстановлением исходного состояния словаря после завершения теста:
>>> foo = {'key': 'value'}
>>> original = foo.copy()
>>> with patch.dict(foo, {'newkey': 'newvalue'}, clear=True):
... assert foo == {'newkey': 'newvalue'}
...
>>> assert foo == original
patch, patch.object и patch.dict можно использовать как менеджеры контекста.
Если используется patch для создания mock, можно получить ссылку на mock с помощью формы “as” инструкции with:
>>> class ProductionClass:
... def method(self):
... pass
...
>>> with patch.object(ProductionClass, 'method') as mock_method:
... mock_method.return_value = None
... real = ProductionClass()
... real.method(1, 2, 3)
...
>>> mock_method.assert_called_with(1, 2, 3)
В качестве альтернативы patch, patch.object и patch.dict можно использовать как декораторы классов. При таком использовании это равносильно применению декоратора по отдельности к каждому методу, имя которого начинается с “test”.
26.5.3. Дополнительные примеры¶Further Examples
Вот ещё несколько примеров для немного более сложных сценариев.
26.5.3.1. Мокирование цепочечных вызовов¶Mocking chained calls
Мокирование цепочек вызовов на самом деле просто с mock, если понять атрибут return_value. Когда mock вызывается в первый раз или вы получаете его return_value до вызова, создаётся новый Mock.
Это означает, что можно увидеть, как был использован объект, возвращённый вызовом mock-объекта, запросив return_value mock:
>>> mock = Mock()
>>> mock().foo(a=2, b=3)
<Mock name='mock().foo()' id='...'>
>>> mock.return_value.foo.assert_called_with(a=2, b=3)
Отсюда всего один шаг до настройки и последующих проверок цепочечных вызовов. Конечно, другой альтернативой является написание кода сразу в более тестируемом виде...
Итак, предположим, у нас есть код, который выглядит примерно так:
>>> class Something:
... def __init__(self):
... self.backend = BackendProvider()
... def method(self):
... response = self.backend.get_endpoint('foobar').create_call('spam', 'eggs').start_call()
... # ещё код
Предполагая, что BackendProvider уже хорошо протестирован, как тестировать method()? В частности, нужно проверить, что участок кода # more code использует объект ответа правильным образом.
Поскольку эта цепочка вызовов делается через атрибут экземпляра, можно сделать monkey patch атрибута backend у экземпляра Something. В данном конкретном случае нас интересует только возвращаемое значение последнего вызова start_call, поэтому настройки почти не требуется. Предположим, что возвращаемый объект является файлоподобным, поэтому обеспечим, чтобы наш объект ответа использовал встроенный open в качестве своего spec.
Для этого создадим mock-экземпляр в качестве mock-бэкенда и создадим mock-объект ответа для него. Чтобы задать ответ как возвращаемое значение для этого последнего start_call, можно сделать так:
mock_backend.get_endpoint.return_value.create_call.return_value.start_call.return_value = mock_response.
Это можно сделать немного элегантнее с помощью метода configure_mock(), чтобы напрямую установить возвращаемое значение:
>>> something = Something()
>>> mock_response = Mock(spec=open)
>>> mock_backend = Mock()
>>> config = {'get_endpoint.return_value.create_call.return_value.start_call.return_value': mock_response}
>>> mock_backend.configure_mock(**config)
С их помощью мы применяем monkey-patch к «mock backend» и можем выполнить реальный вызов:
>>> something.backend = mock_backend
>>> something.method()
Используя mock_calls, можно проверить цепочку вызовов одним assert. Цепочка вызовов – это несколько вызовов в одной строке кода, поэтому в mock_calls будет несколько записей. Можно использовать call.call_list(), чтобы создать этот список вызовов для нас:
>>> chained = call.get_endpoint('foobar').create_call('spam', 'eggs').start_call()
>>> call_list = chained.call_list()
>>> assert mock_backend.mock_calls == call_list
26.5.3.2. Частичное мокирование¶Partial mocking
В некоторых тестах требовалось подменить вызов datetime.date.today(), чтобы он возвращал известную дату, но при этом не мешать тестируемому коду создавать новые объекты даты. К сожалению, datetime.date написан на C, и невозможно было просто подменить статический метод date.today через монки-патчинг.
Я нашел простой способ сделать это: обернуть класс date в mock, но передавать вызовы конструктора настоящему классу (и возвращать настоящие экземпляры).
Здесь patch декоратор используется для подмены класса date в тестируемом модуле. Затем атрибуту side_effect у поддельного класса date присваивается лямбда-функция, возвращающая настоящую дату. При вызове поддельного класса date будет создана и возвращена реальная дата через side_effect.
>>> from datetime import date
>>> with patch('mymodule.date') as mock_date:
... mock_date.today.return_value = date(2010, 10, 8)
... mock_date.side_effect = lambda *args, **kw: date(*args, **kw)
...
... assert mymodule.date.today() == date(2010, 10, 8)
... assert mymodule.date(2009, 6, 8) == date(2009, 6, 8)
...
Обратите внимание, что мы не подменяем datetime.date глобально; мы подменяем date в том модуле, который его использует. См. где подменять.
Когда вызывается date.today(), возвращается известная дата, но вызовы конструктора date(...) по-прежнему возвращают обычные даты. Без этого можно столкнуться с необходимостью вычислять ожидаемый результат с помощью того же алгоритма, что и в тестируемом коде, что является классическим антипаттерном тестирования.
Вызовы конструктора date записываются в атрибуты mock_date (call_count и другие), что также может быть полезно для ваших тестов.
Альтернативный способ мокирования дат или других встроенных классов описан в этой записи блога.
26.5.3.3. Мокирование метода-генератора¶Mocking a Generator Method
Генератор Python – это функция или метод, которая использует оператор yield statement для возврата последовательности значений при итерации [1].
Метод или функция генератора вызывается для возврата объекта генератора. Затем выполняется итерация именно по этому объекту генератора. Метод протокола для итерации – __iter__, поэтому можно подменить это с помощью MagicMock.
Вот пример класса с методом “iter”, реализованным как генератор:
>>> class Foo:
... def iter(self):
... for i in [1, 2, 3]:
... yield i
...
>>> foo = Foo()
>>> list(foo.iter())
[1, 2, 3]
Как бы мы мокировали этот класс и, в частности, его метод “iter”?
Чтобы настроить значения, возвращаемые при итерации (неявно при вызове list), необходимо настроить объект, возвращаемый вызовом foo.iter().
>>> mock_foo = MagicMock()
>>> mock_foo.iter.return_value = iter([1, 2, 3])
>>> list(mock_foo.iter())
[1, 2, 3]
| [1] | Существуют также генераторные выражения и более продвинутые применения генераторов, но здесь они нас не интересуют. Очень хорошее введение в генераторы и их мощь: Generator Tricks for Systems Programmers. |
26.5.3.4. Применение одного и того же патча к каждому тестовому методу¶Applying the same patch to every test method
Если нужно настроить несколько подмен для нескольких тестовых методов, очевидный способ – применить декораторы patch к каждому методу. Это может показаться излишним повторением. Начиная с Python 2.6 можно использовать patch (во всех его формах) как декоратор класса. Это применяет подмены ко всем тестовым методам класса. Тестовый метод определяется как метод, имя которого начинается с test:
>>> @patch('mymodule.SomeClass')
... class MyTest(TestCase):
...
... def test_one(self, MockSomeClass):
... self.assertIs(mymodule.SomeClass, MockSomeClass)
...
... def test_two(self, MockSomeClass):
... self.assertIs(mymodule.SomeClass, MockSomeClass)
...
... def not_a_test(self):
... return 'something'
...
>>> MyTest('test_one').test_one()
>>> MyTest('test_two').test_two()
>>> MyTest('test_two').not_a_test()
'something'
Альтернативный способ управления подменами – использование методов patch: start и stop. Они позволяют перенести подмену в методы setUp и tearDown.
>>> class MyTest(TestCase):
... def setUp(self):
... self.patcher = patch('mymodule.foo')
... self.mock_foo = self.patcher.start()
...
... def test_foo(self):
... self.assertIs(mymodule.foo, self.mock_foo)
...
... def tearDown(self):
... self.patcher.stop()
...
>>> MyTest('test_foo').run()
Если используется этот приём, необходимо убедиться, что подмена «отменена» вызовом stop. Это может быть сложнее, чем кажется, потому что если в setUp возникло исключение, tearDown не вызывается. unittest.TestCase.addCleanup() упрощает это:
>>> class MyTest(TestCase):
... def setUp(self):
... patcher = patch('mymodule.foo')
... self.addCleanup(patcher.stop)
... self.mock_foo = patcher.start()
...
... def test_foo(self):
... self.assertIs(mymodule.foo, self.mock_foo)
...
>>> MyTest('test_foo').run()
26.5.3.5. Мокирование несвязанных методов¶Mocking Unbound Methods
При написании тестов мне потребовалось исправить несвязанный метод (исправить метод на уровне класса, а не экземпляра). Мне нужно было, чтобы self передавался первым аргументом, потому что я хотел проверять, какие объекты вызывали этот конкретный метод. Проблема в том, что для этого нельзя использовать мок: если заменить несвязанный метод на мок, тот не станет связанным методом при получении из экземпляра, и self не будет передан. Обходной путь – исправить несвязанный метод настоящей функцией. Декоратор patch() настолько упрощает замену методов моками, что создание настоящей функции становится обременительным.
Если передать autospec=True в patch, то подмена выполняется с помощью настоящего объекта функции. Этот объект функции имеет ту же сигнатуру, что и заменяемый, но внутри делегирует вызовы mock. При этом mock по-прежнему создаётся автоматически так же, как и раньше. Однако это означает, что если использовать его для подмены непривязанного метода класса, то подменённая функция станет привязанным методом, если получить её из экземпляра. В неё будет передан self в качестве первого аргумента, что именно и требовалось:
>>> class Foo:
... def foo(self):
... pass
...
>>> with patch.object(Foo, 'foo', autospec=True) as mock_foo:
... mock_foo.return_value = 'foo'
... foo = Foo()
... foo.foo()
...
'foo'
>>> mock_foo.assert_called_once_with(foo)
Если не использовать autospec=True, то непривязанный метод подменяется экземпляром Mock, и он не вызывается с self.
26.5.3.6. Проверка множественных вызовов с помощью mock¶Checking multiple calls with mock
У mock есть удобный API для проверки того, как используются объекты mock.
>>> mock = Mock()
>>> mock.foo_bar.return_value = None
>>> mock.foo_bar('baz', spam='eggs')
>>> mock.foo_bar.assert_called_with('baz', spam='eggs')
Если мок вызывается только один раз, можно использовать метод assert_called_once_with(), который также проверяет, что call_count равен единице.
>>> mock.foo_bar.assert_called_once_with('baz', spam='eggs')
>>> mock.foo_bar()
>>> mock.foo_bar.assert_called_once_with('baz', spam='eggs')
Traceback (most recent call last):
...
AssertionError: Expected to be called once. Called 2 times.
Оба метода assert_called_with и assert_called_once_with делают утверждения о последнем вызове. Если mock будет вызван несколько раз, и нужно сделать утверждения обо всех этих вызовах, можно использовать call_args_list:
>>> mock = Mock(return_value=None)
>>> mock(1, 2, 3)
>>> mock(4, 5, 6)
>>> mock()
>>> mock.call_args_list
[call(1, 2, 3), call(4, 5, 6), call()]
Вспомогательный объект call упрощает создание утверждений об этих вызовах. Можно составить список ожидаемых вызовов и сравнить его с call_args_list. Это выглядит очень похоже на строковое представление call_args_list:
>>> expected = [call(1, 2, 3), call(4, 5, 6), call()]
>>> mock.call_args_list == expected
True
26.5.3.7. Работа с изменяемыми аргументами¶Coping with mutable arguments
Ещё одна редкая, но коварная ситуация – когда mock вызывается с изменяемыми аргументами. call_args и call_args_list хранят ссылки на аргументы. Если аргументы изменяются тестируемым кодом, то уже невозможно сделать утверждения о том, какие значения были на момент вызова mock.
Вот пример кода, демонстрирующий проблему. Предположим, в 'mymodule' определены следующие функции:
def frob(val):
pass
def grob(val):
"First frob and then clear val"
frob(val)
val.clear()
Когда мы пытаемся проверить, что grob вызывает frob с правильным аргументом, посмотрите, что происходит:
>>> with patch('mymodule.frob') as mock_frob:
... val = set([6])
... mymodule.grob(val)
...
>>> val
set([])
>>> mock_frob.assert_called_with(set([6]))
Traceback (most recent call last):
...
AssertionError: Expected: ((set([6]),), {})
Called with: ((set([]),), {})
Одним из возможных решений было бы копирование аргументов, передаваемых в mock. Однако это может вызвать проблемы, если проверки полагаются на тождественность объектов для сравнения.
Here’s one solution that uses the side_effect functionality. If you provide a side_effect function for a mock then side_effect will be called with the same args as the mock. This gives us an opportunity to copy the arguments and store them for later assertions. In this example I’m using another mock to store the arguments so that I can use the mock methods for doing the assertion. Again a helper function sets this up for me.
>>> from copy import deepcopy
>>> from unittest.mock import Mock, patch, DEFAULT
>>> def copy_call_args(mock):
... new_mock = Mock()
... def side_effect(*args, **kwargs):
... args = deepcopy(args)
... kwargs = deepcopy(kwargs)
... new_mock(*args, **kwargs)
... return DEFAULT
... mock.side_effect = side_effect
... return new_mock
...
>>> with patch('mymodule.frob') as mock_frob:
... new_mock = copy_call_args(mock_frob)
... val = set([6])
... mymodule.grob(val)
...
>>> new_mock.assert_called_with(set([6]))
>>> new_mock.call_args
call(set([6]))
copy_call_args вызывается с mock, который будет вызван. Она возвращает новый mock, на котором мы делаем утверждения. Функция side_effect создаёт копию аргументов и вызывает new_mock с этой копией.
Примечание
Если mock будет использован только один раз, есть более простой способ проверки аргументов в момент вызова. Можно просто выполнить проверку внутри функции side_effect.
>>> def side_effect(arg):
... assert arg == set([6])
...
>>> mock = Mock(side_effect=side_effect)
>>> mock(set([6]))
>>> mock(set())
Traceback (most recent call last):
...
AssertionError
Альтернативный подход – создать подкласс Mock или MagicMock, который копирует аргументы (с помощью copy.deepcopy()). Вот пример реализации:
>>> from copy import deepcopy
>>> class CopyingMock(MagicMock):
... def __call__(self, *args, **kwargs):
... args = deepcopy(args)
... kwargs = deepcopy(kwargs)
... return super(CopyingMock, self).__call__(*args, **kwargs)
...
>>> c = CopyingMock(return_value=None)
>>> arg = set()
>>> c(arg)
>>> arg.add(1)
>>> c.assert_called_with(set())
>>> c.assert_called_with(arg)
Traceback (most recent call last):
...
AssertionError: Expected call: mock(set([1]))
Actual call: mock(set([]))
>>> c.foo
<CopyingMock name='mock.foo' id='...'>
При создании подкласса Mock или MagicMock все динамически создаваемые атрибуты и return_value будут автоматически использовать ваш подкласс. Это означает, что все дочерние объекты CopyingMock также будут иметь тип CopyingMock.
26.5.3.8. Вложение патчей¶Nesting Patches
Использовать patch как менеджер контекста удобно, но при множественных подстановках можно получить вложенные операторы with, уходящие всё дальше вправо с отступами:
>>> class MyTest(TestCase):
...
... def test_foo(self):
... with patch('mymodule.Foo') as mock_foo:
... with patch('mymodule.Bar') as mock_bar:
... with patch('mymodule.Spam') as mock_spam:
... assert mymodule.Foo is mock_foo
... assert mymodule.Bar is mock_bar
... assert mymodule.Spam is mock_spam
...
>>> original = mymodule.Foo
>>> MyTest('test_foo').test_foo()
>>> assert mymodule.Foo is original
С помощью функций очистки cleanup из unittest и методов patch: start и stop можно добиться того же эффекта без вложенных отступов. Простой вспомогательный метод create_patch устанавливает подмену и возвращает созданный mock:
>>> class MyTest(TestCase):
...
... def create_patch(self, name):
... patcher = patch(name)
... thing = patcher.start()
... self.addCleanup(patcher.stop)
... return thing
...
... def test_foo(self):
... mock_foo = self.create_patch('mymodule.Foo')
... mock_bar = self.create_patch('mymodule.Bar')
... mock_spam = self.create_patch('mymodule.Spam')
...
... assert mymodule.Foo is mock_foo
... assert mymodule.Bar is mock_bar
... assert mymodule.Spam is mock_spam
...
>>> original = mymodule.Foo
>>> MyTest('test_foo').run()
>>> assert mymodule.Foo is original
26.5.3.9. Мокирование словаря с помощью MagicMock¶Mocking a dictionary with MagicMock
Может потребоваться заменить словарь (или другой контейнер) mock'ом, записывающим все обращения к нему, но при этом сохраняющим поведение словаря.
Это можно сделать с помощью MagicMock, который будет вести себя как словарь, используя side_effect для делегирования доступа к словарю реальному словарю под нашим контролем.
Когда вызываются методы __getitem__ и __setitem__ нашего MagicMock (обычный доступ к словарю), вызывается side_effect с ключом (а в случае __setitem__ ещё и со значением). Также можно управлять возвращаемым значением.
После использования MagicMock можно использовать такие атрибуты, как call_args_list, чтобы проверить, как использовался словарь:
>>> my_dict = {'a': 1, 'b': 2, 'c': 3}
>>> def getitem(name):
... return my_dict[name]
...
>>> def setitem(name, val):
... my_dict[name] = val
...
>>> mock = MagicMock()
>>> mock.__getitem__.side_effect = getitem
>>> mock.__setitem__.side_effect = setitem
Примечание
Альтернатива использованию MagicMock – использовать Mock и только предоставить те магические методы, которые нужны:
>>> mock = Mock()
>>> mock.__setitem__ = Mock(side_effect=getitem)
>>> mock.__getitem__ = Mock(side_effect=setitem)
Третий вариант – использовать MagicMock, но передав dict в качестве аргумента spec (или spec_set), чтобы созданный MagicMock имел только магические методы словаря:
>>> mock = MagicMock(spec_set=dict)
>>> mock.__getitem__.side_effect = getitem
>>> mock.__setitem__.side_effect = setitem
При наличии этих функций side_effect mock будет вести себя как обычный словарь, но записывая обращения. Он даже возбуждает KeyError при попытке доступа к несуществующему ключу.
>>> mock['a']
1
>>> mock['c']
3
>>> mock['d']
Traceback (most recent call last):
...
KeyError: 'd'
>>> mock['b'] = 'fish'
>>> mock['d'] = 'eggs'
>>> mock['b']
'fish'
>>> mock['d']
'eggs'
После использования можно делать утверждения о доступе, используя обычные методы и атрибуты mock:
>>> mock.__getitem__.call_args_list
[call('a'), call('c'), call('d'), call('b'), call('d')]
>>> mock.__setitem__.call_args_list
[call('b', 'fish'), call('d', 'eggs')]
>>> my_dict
{'a': 1, 'c': 3, 'b': 'fish', 'd': 'eggs'}
26.5.3.10. Подклассы Mock и их атрибуты¶Mock subclasses and their attributes
Существует множество причин для создания подкласса Mock. Одна из причин – добавление вспомогательных методов. Вот забавный пример:
>>> class MyMock(MagicMock):
... def has_been_called(self):
... return self.called
...
>>> mymock = MyMock(return_value=None)
>>> mymock
<MyMock id='...'>
>>> mymock.has_been_called()
False
>>> mymock()
>>> mymock.has_been_called()
True
Стандартное поведение для экземпляров Mock заключается в том, что атрибуты и возвращаемые значения mock имеют тот же тип, что и mock, к которому они обращаются. Это гарантирует, что атрибуты Mock являются Mock, а атрибуты MagicMock являются MagicMock [2]. Поэтому если создаётся подкласс для добавления вспомогательных методов, они также будут доступны для атрибутов и возвращаемых значений mock экземпляров вашего подкласса.
>>> mymock.foo
<MyMock name='mock.foo' id='...'>
>>> mymock.foo.has_been_called()
False
>>> mymock.foo()
<MyMock name='mock.foo()' id='...'>
>>> mymock.foo.has_been_called()
True
Иногда это неудобно. Например, один пользователь создаёт подкласс mock для адаптера Twisted. Применение этого же поведения к атрибутам приводит к ошибкам.
Mock (во всех своих вариантах) использует метод _get_child_mock для создания этих «дочерних mock» для атрибутов и возвращаемых значений. Можно предотвратить использование подкласса для атрибутов, переопределив этот метод. Его сигнатура: он принимает произвольные именованные аргументы (**kwargs), которые затем передаются конструктору mock:
>>> class Subclass(MagicMock):
... def _get_child_mock(self, **kwargs):
... return MagicMock(**kwargs)
...
>>> mymock = Subclass()
>>> mymock.foo
<MagicMock name='mock.foo' id='...'>
>>> assert isinstance(mymock, Subclass)
>>> assert not isinstance(mymock.foo, Subclass)
>>> assert not isinstance(mymock(), Subclass)
| [2] | Исключение из этого правила – невызываемые имитации. Атрибуты используют вызываемый вариант, потому что иначе невызываемые имитации не могли бы иметь вызываемые методы. |
26.5.3.11. Имитация импорта с помощью patch.dict¶Mocking imports with patch.dict
Одна из ситуаций, где имитация сложна – локальный импорт внутри функции. Такие импорты труднее подменить, потому что они не используют объект из пространства имён модуля, который можно замокать.
В целом локальных импортов следует избегать. Иногда их используют для предотвращения циклических зависимостей, для чего обычно есть гораздо лучшее решение (рефакторинг кода), или для снижения «начальных затрат» путём отложенного импорта. Эту проблему также можно решить лучше, чем безусловный локальный импорт (сохранить модуль как атрибут класса или модуля и выполнять импорт только при первом использовании).
Помимо этого, есть способ использовать mock, чтобы влиять на результаты импорта. Импорт извлекает объект из словаря sys.modules. Обратите внимание, что извлекается объект, который не обязательно является модулем. При первом импорте модуля в sys.modules помещается объект модуля, поэтому обычно при импорте чего-либо вы получаете модуль. Однако это не обязательно так.
Это значит, что вы можете использовать patch.dict(), чтобы временно поместить мок в sys.modules. Любой импорт, пока активен этот патч, будет извлекать мок. Когда патч завершается (декорированная функция завершается, тело with-блока заканчивается или вызывается patcher.stop()), то все, что было ранее, безопасно восстанавливается.
Вот пример, который имитирует модуль 'fooble'.
>>> mock = Mock()
>>> with patch.dict('sys.modules', {'fooble': mock}):
... import fooble
... fooble.blob()
...
<Mock name='mock.blob()' id='...'>
>>> assert 'fooble' not in sys.modules
>>> mock.blob.assert_called_once_with()
Как видите, import fooble выполняется успешно, но после выхода в sys.modules не остаётся 'fooble'.
Это также работает для формы from module import name:
>>> mock = Mock()
>>> with patch.dict('sys.modules', {'fooble': mock}):
... from fooble import blob
... blob.blip()
...
<Mock name='mock.blob.blip()' id='...'>
>>> mock.blob.blip.assert_called_once_with()
Немного больше усилий, и можно также имитировать импорт пакетов:
>>> mock = Mock()
>>> modules = {'package': mock, 'package.module': mock.module}
>>> with patch.dict('sys.modules', modules):
... from package.module import fooble
... fooble()
...
<Mock name='mock.module.fooble()' id='...'>
>>> mock.module.fooble.assert_called_once_with()
26.5.3.12. Отслеживание порядка вызовов и менее многословные утверждения о вызовах¶Tracking order of calls and less verbose call assertions
Класс Mock позволяет отслеживать порядок вызовов методов для объектов-заглушек через атрибут method_calls. Это не позволяет отслеживать порядок вызовов между отдельными объектами-заглушками, однако мы можем использовать mock_calls для достижения того же эффекта.
Поскольку моки отслеживают вызовы дочерних моков в mock_calls, и обращение к произвольному атрибуту мока создает дочерний мок, мы можем создавать отдельные моки из родительского. Затем все вызовы этих дочерних моков будут записаны по порядку в mock_calls родителя:
>>> manager = Mock()
>>> mock_foo = manager.foo
>>> mock_bar = manager.bar
>>> mock_foo.something()
<Mock name='mock.foo.something()' id='...'>
>>> mock_bar.other.thing()
<Mock name='mock.bar.other.thing()' id='...'>
>>> manager.mock_calls
[call.foo.something(), call.bar.other.thing()]
Затем мы можем проверять утверждения о вызовах, включая порядок, сравнивая с атрибутом mock_calls у мок-менеджера:
>>> expected_calls = [call.foo.something(), call.bar.other.thing()]
>>> manager.mock_calls == expected_calls
True
Если patch создает и размещает ваши моки, то вы можете прикрепить их к мок-менеджеру с помощью метода attach_mock(). После прикрепления вызовы будут записываться в mock_calls менеджера.
>>> manager = MagicMock()
>>> with patch('mymodule.Class1') as MockClass1:
... with patch('mymodule.Class2') as MockClass2:
... manager.attach_mock(MockClass1, 'MockClass1')
... manager.attach_mock(MockClass2, 'MockClass2')
... MockClass1().foo()
... MockClass2().bar()
...
<MagicMock name='mock.MockClass1().foo()' id='...'>
<MagicMock name='mock.MockClass2().bar()' id='...'>
>>> manager.mock_calls
[call.MockClass1(),
call.MockClass1().foo(),
call.MockClass2(),
call.MockClass2().bar()]
Если было сделано много вызовов, но вас интересует только определенная их последовательность, то альтернативой является использование метода assert_has_calls(). Он принимает список вызовов (созданных с помощью объекта call). Если эта последовательность вызовов присутствует в mock_calls, то утверждение проходит успешно.
>>> m = MagicMock()
>>> m().foo().bar().baz()
<MagicMock name='mock().foo().bar().baz()' id='...'>
>>> m.one().two().three()
<MagicMock name='mock.one().two().three()' id='...'>
>>> calls = call.one().two().three().call_list()
>>> m.assert_has_calls(calls)
Даже если цепочка вызовов m.one().two().three() – не единственные вызовы, которые были сделаны к моку, утверждение всё равно проходит.
Иногда мок может иметь несколько вызовов, и вас интересует проверка только некоторых из них. Вас может даже не волновать порядок. В этом случае можно передать any_order=True в assert_has_calls:
>>> m = MagicMock()
>>> m(1), m.two(2, 3), m.seven(7), m.fifty('50')
(...)
>>> calls = [call.fifty('50'), call(1), call.seven(7)]
>>> m.assert_has_calls(calls, any_order=True)
26.5.3.13. Более сложное сопоставление аргументов¶More complex argument matching
Используя ту же основную концепцию, что и ANY, мы можем реализовать сопоставители для более сложных утверждений об объектах, используемых в качестве аргументов заглушек.
Предположим, мы ожидаем, что некоторый объект будет передан заглушке, и этот объект по умолчанию сравнивается по идентичности (что является стандартным для Python для пользовательских классов). Чтобы использовать assert_called_with(), нам нужно передать точно тот же самый объект. Если нас интересуют только некоторые атрибуты этого объекта, то мы можем создать сопоставитель, который будет проверять эти атрибуты за нас.
В этом примере видно, как «стандартный» вызов assert_called_with не является достаточным:
>>> class Foo:
... def __init__(self, a, b):
... self.a, self.b = a, b
...
>>> mock = Mock(return_value=None)
>>> mock(Foo(1, 2))
>>> mock.assert_called_with(Foo(1, 2))
Traceback (most recent call last):
...
AssertionError: Expected: call(<__main__.Foo object at 0x...>)
Actual call: call(<__main__.Foo object at 0x...>)
Функция сравнения для нашего класса Foo может выглядеть примерно так:
>>> def compare(self, other):
... if not type(self) == type(other):
... return False
... if self.a != other.a:
... return False
... if self.b != other.b:
... return False
... return True
...
А объект-сопоставитель, который может использовать такие функции сравнения для операции равенства, будет выглядеть примерно так:
>>> class Matcher:
... def __init__(self, compare, some_obj):
... self.compare = compare
... self.some_obj = some_obj
... def __eq__(self, other):
... return self.compare(self.some_obj, other)
...
Собираем всё вместе:
>>> match_foo = Matcher(compare, Foo(1, 2))
>>> mock.assert_called_with(match_foo)
Matcher создается с нашей функцией сравнения и объектом Foo, с которым мы хотим сравнивать. В assert_called_with будет вызван метод равенства Matcher, который сравнивает объект, с которым был вызван мок, с тем, с которым мы создали наш матчер. Если они совпадают, то assert_called_with проходит, а если нет – вызывается AssertionError:
>>> match_wrong = Matcher(compare, Foo(3, 4))
>>> mock.assert_called_with(match_wrong)
Traceback (most recent call last):
...
AssertionError: Expected: ((<Matcher object at 0x...>,), {})
Called with: ((<Foo object at 0x...>,), {})
Немного доработав, можно заставить функцию сравнения вызывать AssertionError напрямую и предоставлять более полезное сообщение об ошибке.
Начиная с версии 1.5, библиотека тестирования Python PyHamcrest предоставляет аналогичную функциональность, которая может быть полезна здесь, в виде средства сравнения на равенство (hamcrest.library.integration.match_equality).