Содержание страницы
6. Выражения¶Expressions
В этой главе объясняется значение элементов выражений в Python.
Примечания по синтаксису: В этой и следующих главах грамматическая нотация будет использоваться для описания синтаксиса, а не лексического анализа.
Когда (одна из альтернатив) синтаксического правила имеет вид:
name: othername
и семантика не указана, то семантика этой формы name такая же,
как для othername.
6.1. Арифметические преобразования¶Arithmetic conversions
Когда в описании арифметического оператора ниже используется фраза «числовые аргументы преобразуются к общему вещественному типу», это означает, что реализация оператора для встроенных числовых типов работает так, как описано в разделе Числовые типы документации стандартной библиотеки.
Некоторые дополнительные правила применяются к определённым операторам и нечисловым операндам
(например, строка в качестве левого аргумента оператора %).
Расширения должны определять собственное поведение преобразования.
6.2. Атомы¶Atoms
Атомы – это самые базовые элементы выражений. Простейшие атомы – это имена или литералы. Формы, заключённые в круглые, квадратные или фигурные скобки, также синтаксически относятся к атомам.
Формально синтаксис атомов выглядит так:
atom: | 'True' | 'False' | 'None' | '...' |identifier|literal|enclosureenclosure: |parenth_form|list_display|dict_display|set_display|generator_expression|yield_atom
6.2.1. Встроенные константы¶Built-in constants
Ключевые слова True, False и None обозначают
встроенные константы.
Токен ... обозначает константу Ellipsis.
Вычисление этих атомов даёт соответствующее значение.
Примечание
Есть ещё несколько встроенных констант, доступных как глобальные переменные, но только упомянутые здесь являются ключевыми словами. В частности, эти имена нельзя переопределять или использовать как атрибуты:
>>> False = 123
File "<input>", line 1
False = 123
^^^^^
SyntaxError: cannot assign to False
6.2.2. Идентификаторы (Имена)¶Identifiers (Names)
Идентификатор, выступающий в роли атома, является именем. См. раздел Имена (идентификаторы и ключевые слова) для лексического определения и раздел Именование и связывание для документации по именованию и связыванию.
Когда имя привязано к объекту, вычисление атома возвращает этот объект.
Когда имя не привязано, попытка его вычисления вызывает NameError
исключение.
6.2.2.1. Преобразование приватных имён¶Private name mangling
Когда идентификатор, текстуально встречающийся в определении класса, начинается с двух или более символов подчёркивания и не заканчивается двумя или более подчёркиваниями, он считается приватным именем этого класса.
См. также
Более точно, приватные имена преобразуются в более длинную форму до генерации кода. Если преобразованное имя длиннее 255 символов, может произойти усечение, определяемое реализацией.
Преобразование не зависит от синтаксического контекста, в котором используется идентификатор, но только следующие приватные идентификаторы преобразуются:
Любое имя, используемое как имя переменной, которой присваивается значение или которая читается, или любое имя атрибута, к которому осуществляется доступ.
Однако атрибут
__name__вложенных функций, классов и псевдонимов типов не преобразуется.Имя импортированных модулей, например,
__spamвimport __spam. Если модуль является частью пакета (т.е. его имя содержит точку), то имя не преобразуется, например,__fooвimport __foo.barне преобразуется.Имя импортированного члена, например,
__fвfrom spam import __f.
Правило преобразования определяется следующим образом:
Имя класса с удалёнными начальными подчёркиваниями и одним вставленным начальным подчёркиванием добавляется перед идентификатором, например, идентификатор
__spam, встречающийся в классе с именемFoo,_Fooили__Foo, преобразуется в_Foo__spam.Если имя класса состоит только из подчёркиваний, преобразование не выполняется – например, идентификатор
__spamв классе с именем_или__остаётся без изменений.
6.2.3. Литералы¶Literals
Литерал – это текстовое представление значения. Python поддерживает числовые, строковые и байтовые литералы. Форматированные строки и шаблонные строки считаются строковыми литералами.
Числовые литералы состоят из одного токена NUMBER, который задаёт целое число, число с плавающей точкой или комплексное число. Подробнее см. раздел Числовые литералы в документации по лексическому анализу.
Строковые и байтовые литералы могут состоять из нескольких токенов. Подробнее см. раздел Конкатенация строковых литералов.
Обратите внимание: отрицательные и комплексные числа, такие как -3 или 3+4.2j, синтаксически не являются литералами, а представляют собой унарные или бинарные арифметические операции с операторами - или +.
Вычисление литерала возвращает объект заданного типа (int, float, complex, str, bytes или Template) с соответствующим значением. Для литералов с плавающей точкой и комплексных литералов значение может быть приближённым.
Формальная грамматика литералов:
literal:strings|NUMBER
6.2.3.1. Литералы и тождественность объектов¶Literals and object identity
Все литералы соответствуют неизменяемым типам данных, поэтому тождественность объекта менее важна, чем его значение. При многократном вычислении литералов с одинаковым значением (одного и того же или разных вхождений в тексте программы) может получаться как один и тот же объект, так и разные объекты с одним и тем же значением.
Особенность реализации CPython
Например, в CPython малые целые числа с одинаковым значением вычисляются в один и тот же объект:
>>> x = 7
>>> y = 7
>>> x is y
True
Однако большие целые числа вычисляются в разные объекты:
>>> x = 123456789
>>> y = 123456789
>>> x is y
False
Такое поведение может измениться в будущих версиях CPython. В частности, граница между «малыми» и «большими» целыми числами уже менялась в прошлом.
CPython выдаёт предупреждение SyntaxWarning при сравнении литералов с помощью is:
>>> x = 7
>>> x is 7
<input>:1: SyntaxWarning: "is" with 'int' literal. Did you mean "=="?
True
Дополнительную информацию см. в разделе Когда можно полагаться на проверки тождественности с оператором is?.
Шаблонные строки неизменяемы, но могут ссылаться на изменяемые объекты в качестве значений Interpolation. Для целей данного раздела две t-строки считаются имеющими «одинаковое значение», если совпадают как их структура, так и тождественность значений.
Особенность реализации CPython: В настоящее время каждое вычисление шаблонной строки приводит к созданию нового объекта.
6.2.3.2. Конкатенация строковых литералов¶String literal concatenation
Допускается несколько расположенных рядом строковых или байтовых литералов, возможно, с разными кавычками; их значение равно результату конкатенации:
>>> "hello" 'world'
"helloworld"
Эта возможность определена на синтаксическом уровне, поэтому работает только с литералами. Для конкатенации строковых выражений во время выполнения можно использовать оператор «+»:
>>> greeting = "Hello"
>>> space = " "
>>> name = "Blaise"
>>> print(greeting + space + name) # не: print(greeting space name)
Hello Blaise
Конкатенация литералов свободно сочетает неформатированные строки, строки в тройных кавычках и форматированные строковые литералы. Например:
>>> "Hello" r', ' f"{name}!"
"Hello, Blaise!"
Эту возможность можно использовать для уменьшения количества обратных слешей, для удобного разделения длинных строк на несколько строк или даже для добавления комментариев к частям строки. Например:
re.compile("[A-Za-z_]" # буква или подчёркивание
"[A-Za-z0-9_]*" # буква, цифра или подчёркивание
)
Однако байтовые литералы можно объединять только с другими байтовыми литералами – не со строковыми литералами любого вида. Также шаблонные строковые литералы можно объединять только с другими шаблонными строковыми литералами:
>>> t"Hello" t"{name}!"
Template(strings=('Hello', '!'), interpolations=(...))
Формально:
strings: (STRING|fstring)+ |tstring+
6.2.4. Выражения в скобках¶Parenthesized forms
Выражение в скобках – это необязательный список выражений, заключённый в круглые скобки:
parenth_form: "(" [starred_expression] ")"
Вычисление списка выражений в скобках даёт результат этого списка: если список содержит хотя бы одну запятую, получается кортеж; в противном случае – единственное выражение, из которого состоит список.
Пустая пара скобок даёт пустой кортеж. Поскольку кортежи неизменяемы, действуют те же правила, что и для литералов (два вхождения пустого кортежа могут как совпадать, так и не совпадать как объекты).
Обратите внимание: кортежи образуются не скобками, а запятой. Исключение – пустой кортеж, для которого скобки обязательны: разрешить выражение без скобок, означающее «ничего», привело бы к двусмысленности и позволило бы типичным опечаткам остаться незамеченными.
6.2.5. Отображения для списков, множеств и словарей¶Displays for lists, sets and dictionaries
Для создания списка, множества или словаря в Python предусмотрен специальный синтаксис, называемый «отображениями» (displays); каждый из них существует в двух вариантах:
либо содержимое контейнера перечисляется явно, либо
они вычисляются с помощью набора инструкций циклов и фильтрации, называемого включением (comprehension).
Общие синтаксические элементы для включений:
comprehension:assignment_expressioncomp_forcomp_for: ["async"] "for"target_list"in"or_test[comp_iter] comp_iter:comp_for|comp_ifcomp_if: "if"or_test[comp_iter]
Включение состоит из одного выражения, за которым следует по крайней мере одно предложение for и ноль или более предложений for или if. В этом случае элементами нового контейнера будут те, которые получаются при рассмотрении каждого из предложений for или if как блока, с вложением слева направо, и вычислении выражения для получения элемента каждый раз, когда достигается самый внутренний блок.
Однако, за исключением итерируемого выражения в самом левом предложении for, включение выполняется в отдельной неявно вложенной области видимости. Это гарантирует, что имена, присваиваемые в целевом списке, не «утекают» в окружающую область.
Итерируемое выражение в самом левом предложении for вычисляется непосредственно в окружающей области видимости, а затем передаётся как аргумент в неявно вложенную область. Последующие предложения for и любое условие фильтрации в самом левом предложении for не могут быть вычислены в окружающей области, поскольку они могут зависеть от значений, полученных из самого левого итерируемого объекта. Например: [x*y for x in range(10) for y in range(x, x+10)].
Чтобы гарантировать, что включение всегда даёт контейнер соответствующего типа, выражения yield и yield from запрещены в неявно вложенной области видимости.
Начиная с Python 3.6, в функции async def предложение async for может использоваться для итерации по асинхронному итератору. Включение в функции async def может состоять из предложения for или async for после ведущего выражения, может содержать дополнительные предложения for или async for, а также может использовать выражения await.
Если включение содержит предложения async for, или содержит выражения await или другие асинхронные включения где-либо, кроме итерируемого выражения в самом левом предложении for, оно называется асинхронным включением. Асинхронное включение может приостанавливать выполнение корутинной функции, в которой оно находится. См. также PEP 530.
Добавлено в версии 3.6: Были введены асинхронные включения.
Изменено в версии 3.8: yield и yield from запрещены в неявно вложенной области видимости.
Изменено в версии 3.11: Асинхронные включения теперь разрешены внутри включений в асинхронных функциях. Внешние включения неявно становятся асинхронными.
6.2.6. Списковые отображения¶List displays
Списковое отображение – это возможно пустая последовательность выражений, заключённая в квадратные скобки:
list_display: "[" [flexible_expression_list|comprehension] "]"
Списковое отображение возвращает новый объект списка, содержимое которого задаётся либо списком выражений, либо включением. Если предоставлен разделённый запятыми список выражений, его элементы вычисляются слева направо и помещаются в объект списка в том же порядке. Если предоставлено включение, список строится из элементов, полученных в результате включения.
6.2.7. Множественные отображения¶Set displays
Множественное отображение обозначается фигурными скобками и отличается от словарных отображений отсутствием двоеточий, разделяющих ключи и значения:
set_display: "{" (flexible_expression_list|comprehension) "}"
Множественное отображение возвращает новый изменяемый объект множества, содержимое которого задаётся либо последовательностью выражений, либо включением. Если предоставлен разделённый запятыми список выражений, его элементы вычисляются слева направо и добавляются в объект множества. Если предоставлено включение, множество строится из элементов, полученных в результате включения.
Пустое множество нельзя создать с помощью {}; этот литерал создаёт пустой словарь.
6.2.8. Словарные отображения¶Dictionary displays
Словарное отображение – это возможно пустая последовательность элементов словаря (пар ключ/значение), заключённая в фигурные скобки:
dict_display: "{" [dict_item_list|dict_comprehension] "}" dict_item_list:dict_item(","dict_item)* [","] dict_item:expression":"expression| "**"or_exprdict_comprehension:expression":"expressioncomp_for
Словарное отображение возвращает новый объект словаря.
Если дана разделённая запятыми последовательность элементов словаря, они вычисляются слева направо для определения записей словаря: каждый объект ключа используется как ключ в словаре для хранения соответствующего значения. Это означает, что можно указать один и тот же ключ несколько раз в списке элементов словаря, и итоговым значением словаря для этого ключа будет последнее указанное.
Двойная звёздочка ** обозначает распаковку словаря. Её операндом должно быть отображение (mapping). Каждый элемент отображения добавляется в новый словарь. Более поздние значения заменяют значения, уже установленные более ранними элементами словаря и более ранними распаковками словарей.
Добавлено в версии 3.5: Распаковка в словарные отображения, изначально предложенная в PEP 448.
Словарное включение, в отличие от списковых и множественных включений, требует двух выражений, разделённых двоеточием, после которых следуют обычные предложения «for» и «if». При выполнении включения результирующие элементы ключей и значений вставляются в новый словарь в порядке их получения.
Ограничения на типы ключевых значений перечислены ранее в разделе Стандартная иерархия типов. (Если кратко, тип ключа должен быть хэшируемым, что исключает все изменяемые объекты.) Коллизии между дублирующимися ключами не обнаруживаются; сохраняется последнее значение (текстуально самое правое в отображении), сохранённое для данного ключа.
Изменено в версии 3.8: До Python 3.8 в словарных включениях порядок вычисления ключа и значения не был строго определён. В CPython значение вычислялось раньше ключа. Начиная с версии 3.8, ключ вычисляется раньше значения, как предложено в PEP 572.
6.2.9. Генераторные выражения¶Generator expressions
Синтаксис для генераторных выражений такой же, как для списковых включений, за исключением того, что они заключаются в круглые скобки вместо квадратных. Например:
>>> iterator = (x ** 2 for x in range(10))
>>> iterator
<generator object <genexpr> at ...>
Во время выполнения генераторное выражение вычисляется в итератор-генератор, который возвращает те же значения, что и соответствующее списковое включение:
>>> list(iterator)
[0, 1, 4, 9, 16, 25, 36, 49, 64, 81]
Таким образом, пример выше примерно эквивалентен определению и вызову следующей генераторной функции:
def make_generator_of_squares(iterator):
for x in iterator:
yield x ** 2
make_generator_of_squares(iter(range(10)))
The enclosing parentheses can be omitted in calls when the generator expression is the only positional argument and there are no keyword arguments. See the Calls section for details. For example:
# Круглые скобки после `sum` являются частью синтаксиса вызова:
>>> sum(x ** 2 for x in range(10))
285
# Генератор требует собственных круглых скобок, если он не единственный аргумент:
>>> sum((x ** 2 for x in range(10)), start=1000)
1285
Итерируемое выражение в крайнем слева предложении for вычисляется
немедленно, поэтому ошибка, возникшая в этом выражении, будет выдана
в точке определения generator-выражения, а не в точке, где запрашивается
первое значение:
>>> (x ** 2 for x in nonexistent_iterable)
Traceback (most recent call last):
...
NameError: name 'nonexistent_iterable' is not defined
После вычисления выражения из результата создаётся итератор,
как если бы для него вызвали iter().
Любая ошибка, возникшая при создании итератора, также выдается немедленно:
>>> (x ** 2 for x in None)
Traceback (most recent call last):
...
TypeError: 'NoneType' object is not iterable
Все остальные выражения вычисляются лениво, так же как и обычные генераторы (то есть когда у итератора запрашивается очередное значение):
>>> iterator = (nonexistent_value for x in range(10))
>>> iterator
<generator object <genexpr> at ...>
>>> list(iterator)
Traceback (most recent call last):
...
NameError: name 'nonexistent_value' is not defined
>>> iterator = (x * y for x in range(10) for y in nonexistent_iterable)
>>> iterator
<generator object <genexpr> at ...>
>>> list(iterator)
Traceback (most recent call last):
...
NameError: name 'nonexistent_iterable' is not defined
Чтобы не нарушать ожидаемую работу самого generator-выражения,
выражения yield и yield from запрещены внутри неявно
вложенной области видимости.
Если generator-выражение содержит предложения async for или
выражения await, оно называется
асинхронным generator-выражением.
Асинхронное generator-выражение возвращает новый асинхронный объект-генератор,
который является асинхронным итератором (см. Асинхронные итераторы).
Формальная грамматика generator-выражений:
generator_expression: "("expressioncomp_for")"
Добавлено в версии 3.6: Появились асинхронные generator-выражения.
Изменено в версии 3.7: До Python 3.7 асинхронные generator-выражения могли
появляться только в корутинах async def. Начиная
с версии 3.7 любая функция может использовать асинхронные generator-выражения.
Изменено в версии 3.8: yield и yield from запрещены в неявно вложенной области видимости.
6.2.10. Выражения yield¶Yield expressions
yield_atom: "("yield_expression")" yield_from: "yield" "from"expressionyield_expression: "yield"yield_list|yield_from
The yield expression is used when defining a generator function
or an asynchronous generator function and
thus can only be used in the body of a function definition. Using a yield
expression in a function’s body causes that function to be a generator function,
and using it in an async def function’s body causes that
coroutine function to be an asynchronous generator function. For example:
def gen(): # определяет функцию-генератор
yield 123
async def agen(): # определяет асинхронную функцию-генератор
yield 123
Из-за побочных эффектов на содержащую область видимости, выражения yield
не допускаются как часть неявно определённых областей видимости, используемых для
реализации включений и generator-выражений.
Изменено в версии 3.8: Выражения yield запрещены в неявно вложенных областях видимости, используемых для реализации включений и generator-выражений.
Generator functions are described below, while asynchronous generator functions are described separately in section Asynchronous generator functions.
При вызове функции-генератора она возвращает итератор, известный как
generator. Этот generator затем управляет выполнением функции-генератора.
Выполнение начинается, когда вызывается один из методов generator.
В этот момент выполнение доходит до первого выражения yield, где оно
снова приостанавливается, возвращая значение yield_list
вызывающему generator, или None, если yield_list опущено.
Под приостановкой подразумевается, что всё локальное состояние
сохраняется, включая текущие привязки локальных переменных, указатель
команд, внутренний стек вычислений и состояние обработки исключений.
Когда выполнение возобновляется вызовом одного из методов generator,
функция продолжается точно так, как если бы выражение yield было просто
ещё одним внешним вызовом. Значение выражения yield после возобновления
зависит от метода, который возобновил выполнение. Если используется __next__()
(обычно через for или встроенную функцию next()), то
результатом будет None. В противном случае, если используется send(),
то результатом будет значение, переданное этому методу.
Всё это делает функции-генераторы весьма похожими на корутины; они могут выдавать значения несколько раз, имеют более одной точки входа, и их выполнение может быть приостановлено. Единственное отличие в том, что функция-генератор не может управлять тем, где должно продолжиться выполнение после yield; управление всегда передаётся вызывающему generator.
Выражения yield разрешены в любом месте конструкции try. Если
generator не возобновляется до его завершения
(достижение нулевого счётчика ссылок или сборка мусора),
будет вызван метод close() generator-итератора,
что позволит выполнить все ожидающие предложения finally.
При использовании yield from <expr> переданное выражение должно быть
итерируемым объектом. Значения, полученные при итерации этого итерируемого объекта, передаются напрямую
вызывающему методов текущего generator. Любые значения, переданные через
send(), и любые исключения, переданные через
throw(), передаются базовому итератору, если у него есть соответствующие
методы. Если это не так, то send()
возбудит AttributeError или TypeError, в то время как
throw() просто немедленно возбудит переданное исключение.
Когда базовый итератор завершён, атрибут value
возбуждённого экземпляра StopIteration становится значением
выражения yield. Он может быть установлен явно при возбуждении
StopIteration или автоматически, когда под-итератор является generator
(путём возврата значения из под-генератора).
Изменено в версии 3.3: Добавлено yield from <expr> для делегирования потока управления под-итератору.
Круглые скобки могут быть опущены, когда выражение yield является единственным выражением в правой части оператора присваивания.
См. также
- PEP 255 - Simple Generators
Предложение по добавлению генераторов и оператора
yieldв Python.- PEP 342 - Coroutines via Enhanced Generators
Предложение по улучшению API и синтаксиса генераторов, позволяющее использовать их как простые корутины.
- PEP 380 - Syntax for Delegating to a Subgenerator
Предложение по введению синтаксиса
yield_from, упрощающее делегирование под-генераторам.- PEP 525 - Asynchronous Generators
The proposal that expanded on PEP 492 by adding generator capabilities to coroutine functions.
6.2.10.1. Методы generator-итератора¶Generator-iterator methods
В этом подразделе описаны методы итератора генератора. Они могут использоваться для управления выполнением генераторной функции.
Обратите внимание, что вызов любого из приведённых ниже методов генератора, когда генератор уже выполняется, приводит к исключению ValueError.
- generator.__next__()¶
Запускает выполнение генераторной функции или возобновляет его с последнего выполненного выражения yield. При возобновлении генераторной функции методом
__next__()текущее выражение yield всегда вычисляется вNone. Затем выполнение продолжается до следующего выражения yield, на котором генератор снова приостанавливается, и значениеyield_listвозвращается вызывающему коду__next__(). Если генератор завершается, не выдав следующего значения, возбуждается исключениеStopIteration.Обычно этот метод вызывается неявно, например, циклом
forили встроенной функциейnext().
- generator.send(value)¶
Возобновляет выполнение и «отправляет» значение в генераторную функцию. Аргумент value становится результатом текущего выражения yield. Метод
send()возвращает следующее значение, выданное генератором, или возбуждаетStopIteration, если генератор завершается, не выдав другого значения. При вызовеsend()для запуска генератора его необходимо вызывать с аргументомNone, так как нет выражения yield, которое могло бы получить значение.
- generator.throw(value)¶
- generator.throw(type[, value[, traceback]])
Возбуждает исключение в точке, где генератор был приостановлен, и возвращает следующее значение, выданное генераторной функцией. Если генератор завершается, не выдав другого значения, возбуждается исключение
StopIteration. Если генераторная функция не перехватывает переданное исключение или возбуждает другое исключение, то это исключение распространяется на вызывающий код.Обычно этот метод вызывается с одним экземпляром исключения, подобно тому, как используется ключевое слово
raise.Однако для обратной совместимости поддерживается вторая сигнатура, следуя соглашению из более старых версий Python. Аргумент type должен быть классом исключения, а value – экземпляром исключения. Если value не указан, вызывается конструктор type для получения экземпляра. Если traceback предоставлен, он устанавливается в исключении, в противном случае любой существующий атрибут
__traceback__, хранящийся в value, может быть очищен.Изменено в версии 3.12: Вторая сигнатура (type[, value[, traceback]]) устарела и может быть удалена в будущей версии Python.
- generator.close()¶
Возбуждает исключение
GeneratorExitв точке, где генераторная функция была приостановлена (эквивалентно вызовуthrow(GeneratorExit)). Исключение возбуждается выражением yield, на котором генератор был приостановлен. Если генераторная функция перехватывает исключение и возвращает значение, это значение возвращается изclose(). Если генераторная функция уже закрыта или возбуждаетGeneratorExit(не перехватывая исключение),close()возвращаетNone. Если генератор выдает значение, возбуждаетсяRuntimeError. Если генератор возбуждает любое другое исключение, оно распространяется на вызывающий код. Если генератор уже завершился из-за исключения или нормального завершения,close()возвращаетNoneи не имеет других эффектов.Изменено в версии 3.13: Если генератор возвращает значение при закрытии, это значение возвращается методом
close().
6.2.10.2. Примеры¶Examples
Вот простой пример, демонстрирующий поведение генераторов и генераторных функций:
>>> def echo(value=None):
... print("Execution starts when 'next()' is called for the first time.")
... try:
... while True:
... try:
... value = (yield value)
... except Exception as e:
... value = e
... finally:
... print("Don't forget to clean up when 'close()' is called.")
...
>>> generator = echo(1)
>>> print(next(generator))
Execution starts when 'next()' is called for the first time.
1
>>> print(next(generator))
None
>>> print(generator.send(2))
2
>>> generator.throw(TypeError, "spam")
TypeError('spam',)
>>> generator.close()
Don't forget to clean up when 'close()' is called.
Примеры использования yield from см. в PEP 380: Syntax for Delegating to a Subgenerator в разделе «What’s New in Python».
6.2.10.3. Асинхронные генераторные функции¶Asynchronous generator functions
Наличие выражения yield в функции или методе, определённом с помощью async def, дополнительно определяет функцию как асинхронный генератор.
При вызове асинхронной генераторной функции она возвращает асинхронный итератор, известный как объект асинхронного генератора. Этот объект затем управляет выполнением генераторной функции. Объект асинхронного генератора обычно используется в инструкции async for внутри корутинной функции, аналогично тому, как объект генератора используется в инструкции for.
Вызов одного из методов асинхронного генератора возвращает ожидаемый объект, и выполнение начинается, когда этот объект ожидается. В этот момент выполнение переходит к первому выражению yield, где оно снова приостанавливается, возвращая значение yield_list ожидающей корутине. Как и в случае с генератором, приостановка означает, что всё локальное состояние сохраняется, включая текущие привязки локальных переменных, указатель инструкций, внутренний стек вычислений и состояние обработки исключений. Когда выполнение возобновляется путём ожидания следующего объекта, возвращённого методами асинхронного генератора, функция может продолжить работу точно так, как если бы выражение yield было просто ещё одним внешним вызовом. Значение выражения yield после возобновления зависит от метода, который возобновил выполнение. Если используется __anext__(), то результатом будет None. В противном случае, если используется asend(), то результатом будет значение, переданное этому методу.
Если асинхронный генератор завершается досрочно из-за break, отмены задачи вызывающего кода или других исключений, запускается код асинхронной очистки генератора, который может возбудить исключения или получить доступ к переменным контекста в неожиданном контексте – возможно, после завершения времени жизни задач, от которых он зависит, или во время завершения цикла событий, когда вызывается сборщик мусора асинхронных генераторов. Чтобы предотвратить это, вызывающий код должен явно закрыть асинхронный генератор, вызвав метод aclose() для финализации генератора и окончательного отсоединения его от цикла событий.
В асинхронной генераторной функции выражения yield разрешены в любом месте конструкции try. Однако если асинхронный генератор не был возобновлён до финализации (достижение нулевого счётчика ссылок или сборка мусора), то выражение yield внутри конструкции try может привести к невозможности выполнить ожидающие предложения finally. В этом случае цикл событий или планировщик, выполняющий асинхронный генератор, должен вызвать метод aclose() итератора асинхронного генератора и запустить полученный объект корутины, чтобы позволить выполниться ожидающим предложениям finally.
Чтобы обеспечить финализацию при завершении цикла событий, цикл событий должен определить функцию финализатор, которая принимает итератор асинхронного генератора и, предположительно, вызывает aclose() и выполняет корутину. Этот финализатор может быть зарегистрирован вызовом sys.set_asyncgen_hooks(). При первой итерации итератор асинхронного генератора сохранит зарегистрированный финализатор для вызова при финализации. Пример реализации метода финализатор см. в реализации asyncio.Loop.shutdown_asyncgens в Lib/asyncio/base_events.py.
Выражение yield from <expr> является синтаксической ошибкой при использовании в асинхронной генераторной функции.
6.2.10.4. Методы итератора асинхронного генератора¶Asynchronous generator-iterator methods
В этом подразделе описаны методы итератора асинхронного генератора, которые используются для управления выполнением генераторной функции.
- async agen.__anext__()¶
Возвращает ожидаемый объект, который при выполнении запускает асинхронный генератор или возобновляет его с последнего выполненного выражения yield. Когда асинхронная генераторная функция возобновляется методом
__anext__(), текущее выражение yield всегда вычисляется вNoneв возвращаемом ожидаемом объекте, который при выполнении продолжает работу до следующего выражения yield. Значениеyield_listвыражения yield - это значение исключенияStopIteration, возбуждённого завершаемой корутиной. Если асинхронный генератор завершается, не выдав другого значения, ожидаемый объект вместо этого возбуждает исключениеStopAsyncIteration, сигнализируя о завершении асинхронной итерации.Обычно этот метод вызывается неявно циклом
async for.
- async agen.asend(value)¶
Возвращает ожидаемый объект, который при запуске возобновляет выполнение асинхронного генератора. Как и в случае метода
send()для генератора, этот «отправляет» значение в асинхронную функцию-генератор, и аргумент value становится результатом текущего выражения yield. Ожидаемый объект, возвращённый методомasend(), вернёт следующее значение, выданное генератором, как значение возбуждённогоStopIteration, или возбуждаетStopAsyncIteration, если асинхронный генератор завершится, не выдав другого значения. Когдаasend()вызывается для запуска асинхронного генератора, он должен быть вызван с аргументомNone, потому что нет выражения yield, которое могло бы получить значение.
- async agen.athrow(value)¶
- async agen.athrow(type[, value[, traceback]])
Возвращает ожидаемый объект, который возбуждает исключение типа
typeв точке, где асинхронный генератор был приостановлен, и возвращает следующее значение, выданное функцией-генератором, как значение возбуждённого исключенияStopIteration. Если асинхронный генератор завершается, не выдав другого значения, ожидаемый объект возбуждает исключениеStopAsyncIteration. Если функция-генератор не перехватывает переданное исключение или возбуждает другое исключение, то при запуске ожидаемого объекта это исключение распространяется на вызывающую сторону.Изменено в версии 3.12: Вторая сигнатура (type[, value[, traceback]]) является устаревшей и может быть удалена в будущей версии Python.
- async agen.aclose()¶
Возвращает ожидаемый объект, который при запуске вызовет
GeneratorExitв асинхронную функцию-генератор в точке, где она была приостановлена. Если асинхронная функция-генератор затем завершается нормально, уже закрыта или возбуждаетGeneratorExit(не перехватив исключение), то возвращаемый ожидаемый объект возбудит исключениеStopIteration. Любые последующие ожидаемые объекты, возвращённые вызовами асинхронного генератора, будут возбуждать исключениеStopAsyncIteration. Если асинхронный генератор выдаёт значение, ожидаемый объект возбуждаетRuntimeError. Если асинхронный генератор возбуждает любое другое исключение, оно распространяется на вызывающую сторону ожидаемого объекта. Если асинхронный генератор уже завершился по причине исключения или нормального завершения, то последующие вызовыaclose()возвратят ожидаемый объект, который ничего не делает.
6.3. Первичные выражения¶Primaries
Первичные выражения представляют операции с самой высокой связностью в языке. Их синтаксис:
primary:atom|attributeref|subscription|call
6.3.1. Ссылки на атрибуты¶Attribute references
Ссылка на атрибут – это первичное выражение, за которым следуют точка и имя:
attributeref:primary"."identifier
Первичное выражение должно вычисляться в объект типа, поддерживающего ссылки на атрибуты (большинство объектов это делают). Затем у этого объекта запрашивается атрибут с указанным идентификатором. Тип и значение полученного атрибута определяются объектом. При многократных вычислениях одной и той же ссылки на атрибут могут получаться разные объекты.
Это поведение можно настроить, переопределив метод __getattribute__() или метод __getattr__(). Сначала вызывается метод __getattribute__(), который либо возвращает значение, либо возбуждает AttributeError, если атрибут недоступен.
Если возбуждено AttributeError и у объекта есть метод __getattr__(), этот метод вызывается как запасной вариант.
6.3.2. Извлечение элементов и срезы¶Subscriptions and slicings
Синтаксис извлечения элемента обычно используется для выбора элемента из контейнера – например, для получения значения из dict:
>>> digits_by_name = {'one': 1, 'two': 2}
>>> digits_by_name['two'] # Индексирование словаря по ключу 'two'
2
В синтаксисе извлечения элемента объект, из которого извлекается элемент – первичное выражение – за которым следует подписка в квадратных скобках. В простейшем случае подписка представляет собой одно выражение.
В зависимости от типа объекта, из которого извлекается элемент, подписка иногда называется ключом (для отображений), индексом (для последовательностей) или аргументом типа (для обобщённых типов). Синтаксически все они эквивалентны:
>>> colors = ['red', 'blue', 'green', 'black']
>>> colors[3] # Индексирование списка по индексу 3
'black'
>>> list[str] # Параметризация типа списка с помощью аргумента типа str
list[str]
Во время выполнения интерпретатор вычисляет первичное выражение и подписку, и вызывает __getitem__() или __class_getitem__() специальный метод первичного выражения с подпиской в качестве аргумента.
Подробнее о том, какой из этих методов вызывается, см. в __class_getitem__ и __getitem__.
Чтобы показать, как работает извлечение элемента, можно определить пользовательский объект, реализующий __getitem__() и выводящий значение подписки:
>>> class SubscriptionDemo:
... def __getitem__(self, key):
... print(f'subscripted with: {key!r}')
...
>>> demo = SubscriptionDemo()
>>> demo[1]
subscripted with: 1
>>> demo['a' * 3]
subscripted with: 'aaa'
См. документацию __getitem__() о том, как встроенные типы обрабатывают извлечение элемента.
Извлечение элемента также может использоваться как цель в операторах присваивания или удаления.
В этих случаях интерпретатор вызывает соответственно __setitem__() или __delitem__() специальный метод объекта, у которого извлекается элемент, вместо __getitem__().
>>> colors = ['red', 'blue', 'green', 'black']
>>> colors[3] = 'white' # Установка элемента по индексу
>>> colors
['red', 'blue', 'green', 'white']
>>> del colors[3] # Удаление элемента по индексу 3
>>> colors
['red', 'blue', 'green']
Все расширенные формы подписки, описанные в следующих разделах, также применимы для присваивания и удаления.
6.3.2.1. Срезы¶Slicings
Более продвинутая форма извлечения элемента – срез – обычно используется для извлечения части последовательности. В этой форме подписка представляет собой срез: до трёх выражений, разделённых двоеточиями. Любое из выражений может быть опущено, но срез должен содержать хотя бы одно двоеточие:
>>> number_names = ['zero', 'one', 'two', 'three', 'four', 'five']
>>> number_names[1:3]
['one', 'two']
>>> number_names[1:]
['one', 'two', 'three', 'four', 'five']
>>> number_names[:3]
['zero', 'one', 'two']
>>> number_names[:]
['zero', 'one', 'two', 'three', 'four', 'five']
>>> number_names[::2]
['zero', 'two', 'four']
>>> number_names[:-3]
['zero', 'one', 'two']
>>> del number_names[4:]
>>> number_names
['zero', 'one', 'two', 'three']
Когда срез вычисляется, интерпретатор создаёт объект slice, чьи атрибуты start, stop и step соответственно являются результатами выражений между двоеточиями.
Любое пропущенное выражение вычисляется в None.
Затем этот объект slice передаётся методу __getitem__() или __class_getitem__() специальный метод, как указано выше.
# продолжение с экземпляром SubscriptionDemo, определённым выше:
>>> demo[2:3]
subscripted with: slice(2, 3, None)
>>> demo[::'spam']
subscripted with: slice(None, None, 'spam')
6.3.2.2. Подписки, разделённые запятыми¶Comma-separated subscripts
Подписка также может быть задана в виде двух или более выражений или срезов, разделённых запятыми:
# продолжение с экземпляром SubscriptionDemo, определённым выше:
>>> demo[1, 2, 3]
subscripted with: (1, 2, 3)
>>> demo[1:2, 3]
subscripted with: (slice(1, 2, None), 3)
Эта форма обычно используется в числовых библиотеках для нарезки многомерных данных.
В этом случае интерпретатор создаёт tuple из результатов выражений или срезов и передаёт этот кортеж методу __getitem__() или __class_getitem__() специальный метод, как указано выше.
Подписка также может быть задана в виде одного выражения или среза, за которым следует запятая, чтобы указать кортеж из одного элемента:
>>> demo['spam',]
subscripted with: ('spam',)
6.3.2.3. Подписки со звёздочкой¶“Starred” subscriptions
Добавлено в версии 3.11: Выражения в tuple_slices могут содержать звёздочку. См. PEP 646.
Индекс также может содержать выражение со звёздочкой.
В этом случае интерпретатор распаковывает результат в кортеж и передаёт этот кортеж в __getitem__() или __class_getitem__():
# продолжение с экземпляром SubscriptionDemo, определённым выше:
>>> demo[*range(10)]
subscripted with: (0, 1, 2, 3, 4, 5, 6, 7, 8, 9)
Выражения со звёздочкой можно комбинировать с выражениями, разделёнными запятыми, и срезами:
>>> demo['a', 'b', *range(3), 'c']
subscripted with: ('a', 'b', 0, 1, 2, 'c')
6.3.2.4. Формальная грамматика индексирования¶Formal subscription grammar
subscription:primary'['subscript']' subscript:single_subscript|tuple_subscriptsingle_subscript:proper_slice|assignment_expressionproper_slice: [expression] ":" [expression] [ ":" [expression] ] tuple_subscript: ','.(single_subscript|starred_expression)+ [',']
Напомним, что оператор | обозначает упорядоченный выбор.
В частности, в subscript, если обе альтернативы совпадают, приоритет имеет первая (single_subscript).
6.3.3. Вызовы¶Calls
Вызов – это обращение к вызываемому объекту (например, функции) с возможно пустой последовательностью аргументов:
call:primary"(" [argument_list[","] |comprehension] ")" argument_list:positional_arguments[","starred_and_keywords] [","keywords_arguments] |starred_and_keywords[","keywords_arguments] |keywords_argumentspositional_arguments:positional_item(","positional_item)* positional_item:assignment_expression| "*"expressionstarred_and_keywords: ("*"expression|keyword_item) ("," "*"expression| ","keyword_item)* keywords_arguments: (keyword_item| "**"expression) (","keyword_item| "," "**"expression)* keyword_item:identifier"="expression
После позиционных и именованных аргументов может стоять необязательная завершающая запятая, но на семантику это не влияет.
Первичное выражение должно принимать значение вызываемого объекта (вызываемыми являются: функции, определённые пользователем, встроенные функции, методы встроенных объектов, объекты классов, методы экземпляров классов и все объекты, имеющие метод __call__()). Все выражения аргументов вычисляются до попытки вызова. За синтаксисом списков формальных параметров обращайтесь к разделу Определения функций.
Если присутствуют именованные аргументы, они сначала преобразуются в позиционные следующим образом. Сначала создаётся список незаполненных слотов для формальных параметров. Если есть N позиционных аргументов, они помещаются в первые N слотов. Затем для каждого именованного аргумента идентификатор используется для определения соответствующего слота (если идентификатор совпадает с именем первого формального параметра, используется первый слот и так далее). Если слот уже занят, возбуждается исключение TypeError. В противном случае аргумент помещается в слот, заполняя его (даже если выражение равно None, оно заполняет слот). Когда все аргументы обработаны, слоты, которые всё ещё не заполнены, заполняются соответствующим значением по умолчанию из определения функции. (Значения по умолчанию вычисляются один раз при определении функции; таким образом, изменяемый объект, такой как список или словарь, используемый в качестве значения по умолчанию, будет общим для всех вызовов, которые не указывают значение аргумента для соответствующего слота; этого обычно следует избегать.) Если остались незаполненные слоты, для которых не указано значение по умолчанию, возбуждается исключение TypeError. В противном случае список заполненных слотов используется как список аргументов для вызова.
Особенность реализации CPython: Реализация может предоставлять встроенные функции, чьи позиционные параметры не имеют имён, даже если они «названы» для целей документации, и поэтому их нельзя передать по ключевому слову. В CPython это относится к функциям, реализованным на C, которые используют PyArg_ParseTuple() для разбора своих аргументов.
Если позиционных аргументов больше, чем слотов формальных параметров, возбуждается исключение TypeError, если только не присутствует формальный параметр с синтаксисом *identifier; в этом случае этот формальный параметр получает кортеж, содержащий лишние позиционные аргументы (или пустой кортеж, если лишних позиционных аргументов не было).
Если какой-либо именованный аргумент не соответствует имени формального параметра, возбуждается исключение TypeError, если только не присутствует формальный параметр с синтаксисом **identifier; в этом случае этот формальный параметр получает словарь, содержащий лишние именованные аргументы (с ключами в качестве имён и значениями аргументов в качестве соответствующих значений), или (новый) пустой словарь, если лишних именованных аргументов не было.
Если в вызове функции присутствует синтаксис *expression, expression должен принимать значение итерируемого объекта. Элементы из этих итерируемых объектов рассматриваются как дополнительные позиционные аргументы. Для вызова f(x1, x2, *y, x3, x4), если y принимает значение последовательности y1, …, yM, это эквивалентно вызову с M+4 позиционными аргументами x1, x2, y1, …, yM, x3, x4.
Следствием этого является то, что хотя синтаксис *expression может появляться после явных именованных аргументов, он обрабатывается до именованных аргументов (и любых аргументов **expression – см. ниже). Итак:
>>> def f(a, b):
... print(a, b)
...
>>> f(b=1, *(2,))
2 1
>>> f(a=1, *(2,))
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
TypeError: f() got multiple values for keyword argument 'a'
>>> f(1, *(2,))
1 2
Обычно именованные аргументы и синтаксис *expression не используются в одном вызове, поэтому на практике такая путаница возникает редко.
Если в вызове функции присутствует синтаксис **expression, expression должен принимать значение отображения, содержимое которого рассматривается как дополнительные именованные аргументы. Если параметру, соответствующему ключу, уже было присвоено значение (явным именованным аргументом или из другой распаковки), возбуждается исключение TypeError.
При использовании **expression каждый ключ в этом отображении должен быть строкой. Каждое значение из отображения присваивается первому формальному параметру, доступному для присваивания по ключевому слову, чьё имя равно ключу. Ключ не обязательно должен быть идентификатором Python (например, "max-temp °F" допустимо, хотя он не будет соответствовать ни одному формальному параметру, который можно объявить). Если соответствия формальному параметру нет, пара ключ-значение собирается параметром **, если он есть, или, если его нет, возбуждается исключение TypeError.
Формальные параметры с синтаксисом *identifier или **identifier не могут использоваться как слоты позиционных аргументов или как имена именованных аргументов.
Изменено в версии 3.5: Вызовы функций принимают любое количество распаковок * и **, позиционные аргументы могут следовать за распаковками итерируемых объектов (*), а именованные аргументы – за распаковками словарей (**). Изначально предложено в PEP 448.
Вызов всегда возвращает некоторое значение, возможно None, если только не возбуждается исключение. Как вычисляется это значение, зависит от типа вызываемого объекта.
Если это–
- пользовательская функция:
Выполняется блок кода функции, которому передаётся список аргументов. Первое, что делает блок кода, – связывает формальные параметры с аргументами; это описано в разделе Определения функций. Когда блок кода выполняет оператор
return, он задаёт возвращаемое значение вызова функции. Если выполнение достигает конца блока кода без выполнения оператораreturn, возвращаемое значение равноNone.- встроенная функция или метод:
Результат зависит от интерпретатора; описания встроенных функций и методов см. в Встроенные функции.
- объект класса:
Возвращается новый экземпляр этого класса.
- метод экземпляра класса:
Вызывается соответствующая пользовательская функция, со списком аргументов, который на один длиннее списка аргументов вызова: экземпляр становится первым аргументом.
- экземпляр класса:
Класс должен определять метод
__call__(); результат будет таким же, как если бы был вызван этот метод.
6.4. Выражение await¶Await expression
Приостанавливает выполнение корутины на ожидаемом объекте. Может использоваться только внутри корутинной функции.
await_expr: "await" primary
Добавлено в версии 3.5.
6.5. Оператор возведения в степень¶The power operator
Оператор возведения в степень имеет более высокий приоритет, чем унарные операторы слева, и более низкий приоритет, чем унарные операторы справа. Синтаксис:
power: (await_expr|primary) ["**"u_expr]
Таким образом, в последовательности операторов возведения в степень и унарных операторов без скобок операторы вычисляются справа налево (это не накладывает ограничений на порядок вычисления операндов): -1**2 даёт -1.
Оператор возведения в степень имеет ту же семантику, что и встроенная функция pow(), вызванная с двумя аргументами: он возвращает левый аргумент, возведённый в степень правого аргумента. Числовые аргументы сначала преобразуются к общему типу, и результат имеет этот тип.
Для операндов типа int результат имеет тот же тип, что и операнды, если только второй аргумент не отрицателен; в этом случае все аргументы преобразуются в float и возвращается результат типа float. Например, 10**2 возвращает 100, но 10**-2 возвращает 0.01.
Возведение 0.0 в отрицательную степень приводит к ZeroDivisionError. Возведение отрицательного числа в дробную степень даёт complex число. (В более ранних версиях это вызывало ValueError.)
Эту операцию можно настроить с помощью специальных методов __pow__() и __rpow__().
6.6. Унарные арифметические и побитовые операции¶Unary arithmetic and bitwise operations
Все унарные арифметические и побитовые операции имеют одинаковый приоритет:
u_expr:power| "-"u_expr| "+"u_expr| "~"u_expr
Унарный оператор - (минус) возвращает отрицание своего числового аргумента; эту операцию можно переопределить с помощью специального метода __neg__().
Унарный оператор + (плюс) возвращает свой числовой аргумент без изменений; эту операцию можно переопределить с помощью специального метода __pos__().
Унарный оператор ~ (инверсия) возвращает побитовую инверсию своего целочисленного аргумента. Побитовая инверсия x определяется как -(x+1). Он применим только к целым числам или пользовательским объектам, переопределяющим специальный метод __invert__().
Во всех трёх случаях, если аргумент имеет неправильный тип, вызывается исключение TypeError.
6.7. Бинарные арифметические операции¶Binary arithmetic operations
Бинарные арифметические операции имеют общепринятые уровни приоритета. Обратите внимание, что некоторые из этих операций также применимы к некоторым нечисловым типам. За исключением оператора возведения в степень, существует только два уровня: один для мультипликативных операторов и один для аддитивных операторов:
m_expr:u_expr|m_expr"*"u_expr|m_expr"@"m_expr|m_expr"//"u_expr|m_expr"/"u_expr|m_expr"%"u_expra_expr:m_expr|a_expr"+"m_expr|a_expr"-"m_expr
Оператор * (умножение) возвращает произведение своих аргументов. Аргументы должны быть либо оба числами, либо один аргумент – целым числом, а другой – последовательностью. В первом случае числа преобразуются к общему вещественному типу, а затем перемножаются. Во втором случае выполняется повторение последовательности; отрицательный коэффициент повторения даёт пустую последовательность.
Эту операцию можно настроить с помощью специальных методов __mul__() и __rmul__().
Изменено в версии 3.14: Если только один операнд является комплексным числом, другой операнд преобразуется в число с плавающей точкой.
Оператор @ (at) предназначен для умножения матриц. Ни один встроенный тип Python не реализует этот оператор.
Эту операцию можно настроить с помощью специальных методов __matmul__() и __rmatmul__().
Добавлено в версии 3.5.
Операторы / (деление) и // (целочисленное деление) возвращают частное своих аргументов. Числовые аргументы сначала преобразуются к общему типу. Деление целых чисел даёт float, а целочисленное деление целых чисел даёт целое число; результат представляет собой математическое деление с применением функции 'floor' к результату. Деление на ноль вызывает исключение ZeroDivisionError.
Операцию деления можно настроить с помощью специальных методов __truediv__() и __rtruediv__(). Операцию целочисленного деления можно настроить с помощью специальных методов __floordiv__() и __rfloordiv__().
Оператор % (остаток от деления) возвращает остаток от деления первого аргумента на второй. Числовые аргументы сначала преобразуются к общему типу. Нулевой правый аргумент вызывает исключение ZeroDivisionError. Аргументы могут быть числами с плавающей точкой, например, 3.14%0.7 равно 0.34 (поскольку 3.14 равно 4*0.7 + 0.34). Оператор остатка всегда возвращает результат с тем же знаком, что и второй операнд (или ноль); абсолютное значение результата строго меньше абсолютного значения второго операнда [1].
Операторы целочисленного деления и остатка связаны следующим тождеством: x == (x//y)*y + (x%y). Целочисленное деление и остаток также связаны со встроенной функцией divmod(): divmod(x, y) == (x//y,
x%y). [2].
Помимо выполнения операции взятия остатка над числами, оператор % также перегружается строковыми объектами для выполнения форматирования строк в старом стиле (также известного как интерполяция). Синтаксис форматирования строк описан в справочнике по библиотеке Python, раздел Форматирование строк в стиле printf.
Операцию взятия остатка можно настроить с помощью специальных методов __mod__() и __rmod__().
Оператор целочисленного деления, оператор остатка и функция divmod() не определены для комплексных чисел. Вместо этого преобразуйте в число с плавающей точкой с помощью функции abs(), если это уместно.
Оператор + (сложение) возвращает сумму своих аргументов. Аргументы должны быть либо оба числами, либо обеими последовательностями одного типа. В первом случае числа преобразуются к общему вещественному типу, а затем складываются. Во втором случае последовательности конкатенируются.
Эту операцию можно настроить с помощью специальных методов __add__() и __radd__().
Изменено в версии 3.14: Если только один операнд является комплексным числом, другой операнд преобразуется в число с плавающей точкой.
Оператор - (вычитание) возвращает разность своих аргументов. Числовые аргументы сначала преобразуются к общему вещественному типу.
Эту операцию можно настроить с помощью специальных методов __sub__() и __rsub__().
Изменено в версии 3.14: Если только один операнд является комплексным числом, другой операнд преобразуется в число с плавающей запятой.
6.8. Операции сдвига¶Shifting operations
Операции сдвига имеют более низкий приоритет, чем арифметические операции:
shift_expr:a_expr|shift_expr("<<" | ">>")a_expr
Эти операторы принимают целые числа в качестве аргументов. Они сдвигают первый аргумент влево или вправо на количество бит, заданное вторым аргументом.
Операцию левого сдвига можно настроить с помощью специальных методов __lshift__() и __rlshift__(). Операцию правого сдвига можно настроить с помощью специальных методов __rshift__() и __rrshift__().
Правый сдвиг на n бит определяется как целочисленное деление на pow(2,n). Левый сдвиг на n бит определяется как умножение на pow(2,n).
6.9. Двоичные побитовые операции¶Binary bitwise operations
Каждая из трёх побитовых операций имеет свой уровень приоритета:
and_expr:shift_expr|and_expr"&"shift_exprxor_expr:and_expr|xor_expr"^"and_expror_expr:xor_expr|or_expr"|"xor_expr
Оператор & возвращает побитовое И (AND) своих аргументов, которые должны быть целыми числами, или один из них должен быть пользовательским объектом, переопределяющим специальные методы __and__() или __rand__().
Оператор ^ возвращает побитовое исключающее ИЛИ (XOR) своих аргументов, которые должны быть целыми числами, или один из них должен быть пользовательским объектом, переопределяющим специальные методы __xor__() или __rxor__().
Оператор | возвращает побитовое (включающее) ИЛИ (OR) своих аргументов, которые должны быть целыми числами, или один из них должен быть пользовательским объектом, переопределяющим специальные методы __or__() или __ror__().
6.10. Сравнения¶Comparisons
В отличие от C, все операции сравнения в Python имеют одинаковый приоритет, который ниже приоритета любых арифметических, сдвиговых или побитовых операций. Также в отличие от C, выражения вида a < b < c интерпретируются так, как принято в математике:
comparison:or_expr(comp_operatoror_expr)* comp_operator: "<" | ">" | "==" | ">=" | "<=" | "!=" | "is" ["not"] | ["not"] "in"
Сравнения возвращают логические значения: True или False. Пользовательские методы расширенного сравнения могут возвращать не-логические значения. В этом случае Python вызовет bool() для такого значения в логических контекстах.
Сравнения можно произвольно объединять в цепочки, например, x < y <= z эквивалентно x < y and y <= z, за исключением того, что y вычисляется только один раз (но в обоих случаях z вообще не вычисляется, если x < y оказывается ложным).
Формально, если a, b, c, …, y, z – это выражения, а op1, op2, …, opN – операторы сравнения, то a op1 b op2 c ... y opN z эквивалентно a op1 b and b op2 c and ... y opN z, за исключением того, что каждое выражение вычисляется не более одного раза.
Обратите внимание, что a op1 b op2 c не подразумевает никакого сравнения между a и c, так что, например, x < y > z совершенно допустимо (хотя, возможно, и некрасиво).
6.10.1. Сравнения значений¶Value comparisons
Операторы <, >, ==, >=, <= и != сравнивают значения двух объектов. Объекты не обязательно должны иметь одинаковый тип.
В главе Объекты, значения и типы говорится, что объекты имеют значение (в дополнение к типу и идентичности). Значение объекта – довольно абстрактное понятие в Python: например, не существует канонического метода доступа к значению объекта. Также не требуется, чтобы значение объекта было сформировано определённым образом, например, из всех его атрибутов данных. Операторы сравнения реализуют определённое представление о том, что является значением объекта. Можно считать, что они косвенно определяют значение объекта через свою реализацию сравнения.
Поскольку все типы являются (прямыми или косвенными) подтипами object, они наследуют поведение сравнения по умолчанию от object. Типы могут настраивать своё поведение сравнения, реализуя методы расширенного сравнения, такие как __lt__(), описанные в разделе Базовая настройка.
Поведение по умолчанию для сравнения на равенство (== и !=) основано на идентичности объектов. Следовательно, сравнение на равенство экземпляров с одинаковой идентичностью даёт равенство, а сравнение экземпляров с разной идентичностью – неравенство. Мотивация такого поведения по умолчанию – желание, чтобы все объекты были рефлексивными (т.е. x is y влечёт x == y).
Поведение сравнения порядка по умолчанию (<, >, <= и >=) не предусмотрено; попытка вызывает TypeError. Мотивация такого поведения по умолчанию – отсутствие аналогичного инварианта, как для равенства.
Поведение сравнения на равенство по умолчанию, при котором экземпляры с разной идентичностью всегда неравны, может противоречить тому, что нужно типам, имеющим разумное определение значения объекта и равенства на основе значения. Таким типам потребуется настраивать своё поведение сравнения, и, в самом деле, ряд встроенных типов уже это сделал.
Следующий список описывает поведение сравнения наиболее важных встроенных типов.
Числа встроенных числовых типов (Числовые типы – int, float, complex) и типов стандартной библиотеки
fractions.Fractionиdecimal.Decimalможно сравнивать как внутри своих типов, так и между ними, с ограничением, что комплексные числа не поддерживают сравнение порядка. В пределах задействованных типов они сравниваются математически (алгоритмически) корректно без потери точности.Значения «не число» (NaN)
float('NaN')иdecimal.Decimal('NaN')являются особыми. Любое упорядоченное сравнение числа со значением «не число» даёт ложь. Контринтуитивное следствие: значения «не число» не равны сами себе. Например, еслиx = float('NaN'),3 < x,x < 3иx == x– все ложны, аx != xистинно. Это поведение соответствует стандарту IEEE 754.NoneиNotImplemented– это синглтоны. PEP 8 рекомендует всегда выполнять сравнения синглтонов с помощьюisилиis not, а не операторов равенства.Бинарные последовательности (экземпляры
bytesилиbytearray) можно сравнивать как внутри своих типов, так и между ними. Они сравниваются лексикографически по числовым значениям своих элементов.Строки (экземпляры
str) сравниваются лексикографически по числовым кодовым точкам Unicode (результат встроенной функцииord()) своих символов. [3]Строки и двоичные последовательности нельзя сравнивать напрямую.
Последовательности (экземпляры
tuple,listилиrange) можно сравнивать только внутри каждого из своих типов, с ограничением, что диапазоны не поддерживают сравнение порядка. Сравнение на равенство между этими типами даёт неравенство, а сравнение порядка между этими типами вызываетTypeError.Последовательности сравниваются лексикографически с помощью сравнения соответствующих элементов. Встроенные контейнеры обычно считают, что одинаковые объекты равны сами себе. Это позволяет им пропускать проверки на равенство для одинаковых объектов для повышения производительности и поддержания внутренних инвариантов.
Лексикографическое сравнение между встроенными коллекциями работает следующим образом:
Чтобы две коллекции были равны при сравнении, они должны быть одного типа, иметь одинаковую длину, и каждая пара соответствующих элементов должна быть равной (например,
[1,2] == (1,2)– ложь, так как типы разные).Коллекции, поддерживающие сравнение порядка, упорядочиваются так же, как и их первые неравные элементы (например,
[1,2,x] <= [1,2,y]имеет то же значение, что иx <= y). Если соответствующего элемента не существует, более короткая коллекция считается меньшей (например,[1,2] < [1,2,3]– истина).
Отображения (экземпляры
dict) равны тогда и только тогда, когда они имеют равные пары(key, value). Сравнение ключей и значений на равенство требует рефлексивности.Сравнения порядка (
<,>,<=и>=) вызываютTypeError.Множества (экземпляры
setилиfrozenset) можно сравнивать как внутри типа, так и между типами.Они определяют операторы сравнения порядка как проверки на подмножество и надмножество. Эти отношения не задают полного порядка (например, два множества
{1,2}и{2,3}не равны, не являются подмножеством друг друга и не являются надмножеством друг друга). Соответственно, множества не подходят в качестве аргументов для функций, зависящих от полного порядка (например,min(),max()иsorted()дают неопределённые результаты, если на вход подаётся список множеств).Сравнение множеств требует рефлексивности их элементов.
У большинства других встроенных типов нет реализованных методов сравнения, поэтому они наследуют поведение сравнения по умолчанию.
Пользовательские классы, которые настраивают своё поведение сравнения, должны по возможности следовать некоторым правилам согласованности:
Сравнение на равенство должно быть рефлексивным. Другими словами, идентичные объекты должны быть равны:
x is yвлечётx == yСравнение должно быть симметричным. Другими словами, следующие выражения должны давать одинаковый результат:
x == yиy == xx != yиy != xx < yиy > xx <= yиy >= xСравнение должно быть транзитивным. Следующие (неисчерпывающие) примеры это иллюстрируют:
x > y and y > zвлечётx > zx < y and y <= zвлечётx < zОбратное сравнение должно давать логическое отрицание. Другими словами, следующие выражения должны давать одинаковый результат:
x == yиnot x != yx < yиnot x >= y(для полного порядка)x > yиnot x <= y(для полного порядка)Последние два выражения применимы к полностью упорядоченным коллекциям (например, к последовательностям, но не к множествам или отображениям). См. также декоратор
total_ordering().Результат
hash()должен быть согласован с равенством. Объекты, которые равны, должны либо иметь одинаковое хеш-значение, либо быть помечены как нехешируемые.
Python не требует соблюдения этих правил согласованности. Фактически, значения «не число» (NaN) являются примером их нарушения.
6.10.2. Операции проверки принадлежности¶Membership test operations
Операторы in и not in проверяют принадлежность. x in
s вычисляется в True, если x является элементом s, и False в противном случае. x not in s возвращает отрицание x in s. Все встроенные последовательности и множества поддерживают это, а также словари, для которых in проверяет, содержит ли словарь заданный ключ. Для контейнерных типов, таких как list, tuple, set, frozenset, dict или collections.deque, выражение x in y эквивалентно any(x is e or x == e for e in y).
Для типов str и bytes x in y равно True тогда и только тогда, когда x является подстрокой y. Эквивалентная проверка: y.find(x) != -1. Пустые строки всегда считаются подстрокой любой другой строки, поэтому "" in "abc" вернёт True.
Для пользовательских классов, которые определяют метод __contains__(), x in
y возвращает True, если y.__contains__(x) возвращает истинное значение, и False в противном случае.
Для пользовательских классов, которые не определяют __contains__(), но определяют __iter__(), x in y равно True, если при итерации по y встречается некоторое значение z, для которого выражение x is z or x == z истинно. Если во время итерации возникает исключение, это равносильно тому, что in вызвало это исключение.
Наконец, используется протокол итерации старого стиля: если класс определяет __getitem__(), x in y равно True тогда и только тогда, когда существует неотрицательный целочисленный индекс i, такой что x is y[i] or x == y[i], и ни один меньший индекс не вызывает исключение IndexError. (Если возникает любое другое исключение, это равносильно тому, что in вызвало это исключение).
Оператор not in определён так, что его истинностное значение противоположно in.
6.10.3. Сравнение идентичности¶Identity comparisons
Операторы is и is not проверяют идентичность объектов: x
is y истинно тогда и только тогда, когда x и y являются одним и тем же объектом. Идентичность объекта
определяется с помощью функции id(). x is not y возвращает противоположное
логическое значение. [4]
6.11. Логические операции¶Boolean operations
or_test:and_test|or_test"or"and_testand_test:not_test|and_test"and"not_testnot_test:comparison| "not"not_test
В контексте логических операций, а также когда выражения используются в операторах управления потоком, следующие значения интерпретируются как ложные: False, None, числовой ноль всех типов, а также пустые строки и контейнеры (включая строки, кортежи, списки, словари, множества и неизменяемые множества). Все остальные значения интерпретируются как истинные. Пользовательские объекты могут настраивать своё логическое значение, предоставив метод __bool__().
Оператор not возвращает True, если его аргумент ложен, и False
в противном случае.
Выражение x and y сначала вычисляет x; если x ложно, возвращается его значение;
в противном случае вычисляется y и возвращается полученное значение.
Выражение x or y сначала вычисляет x; если x истинно, возвращается его значение;
в противном случае вычисляется y и возвращается полученное значение.
Обратите внимание, что ни and, ни or не ограничивают возвращаемое значение и тип
до False и True, а возвращают последний вычисленный
аргумент. Это иногда бывает полезно, например, если s – строка, которую нужно
заменить значением по умолчанию, если она пуста, выражение s or 'foo' даёт
нужное значение. Поскольку not должен создать новое значение, он
возвращает логическое значение независимо от типа своего аргумента
(например, not 'foo' даёт False, а не '').
6.12. Выражения присваивания¶Assignment expressions
assignment_expression: [identifier":="]expression
Выражение присваивания (иногда также называемое «именованным выражением» или
«моржом») присваивает expression
identifier, одновременно возвращая значение
expression.
Один из распространённых случаев использования – при обработке совпавших регулярных выражений:
if matching := pattern.search(data):
do_something(matching)
Или при обработке файлового потока по частям:
while chunk := file.read(9000):
process(chunk)
Выражения присваивания должны быть заключены в круглые скобки, если
они используются как выражения-инструкции, а также как подвыражения в
срезах, условных выражениях, лямбда-выражениях,
выражениях с именованными аргументами и в условиях генераторов списков, а также
в инструкциях assert, with и assignment.
Во всех остальных местах, где они допустимы, скобки не требуются,
в том числе в инструкциях if и while.
Добавлено в версии 3.8: См. PEP 572 для получения дополнительных сведений о выражениях присваивания.
6.13. Условные выражения¶Conditional expressions
conditional_expression:or_test["if"or_test"else"expression] expression:conditional_expression|lambda_expr
Условное выражение (иногда называемое «тернарным оператором») является альтернативой инструкции if-else. Поскольку это выражение, оно возвращает значение и может использоваться как подвыражение.
Выражение x if C else y сначала вычисляет условие C, а не x.
Если C истинно, вычисляется x и возвращается его значение; в противном случае вычисляется y и
возвращается его значение.
См. PEP 308 для получения дополнительных сведений об условных выражениях.
6.14. Лямбда-выражения¶Lambdas
lambda_expr: "lambda" [parameter_list] ":"expression
Лямбда-выражения (иногда называемые лямбда-формами) используются для создания анонимных
функций. Выражение lambda parameters: expression возвращает объект функции.
Этот безымянный объект ведёт себя как объект функции, определённый с помощью:
def <lambda>(parameters):
return expression
См. раздел Определения функций о синтаксисе списков параметров. Обратите внимание, что функции, созданные с помощью лямбда-выражений, не могут содержать инструкции или аннотации.
6.15. Списки выражений¶Expression lists
starred_expression: "*"or_expr|expressionflexible_expression:assignment_expression|starred_expressionflexible_expression_list:flexible_expression(","flexible_expression)* [","] starred_expression_list:starred_expression(","starred_expression)* [","] expression_list:expression(","expression)* [","] yield_list:expression_list|starred_expression"," [starred_expression_list]
За исключением случаев, когда список выражений является частью литерала списка или множества, список выражений, содержащий хотя бы одну запятую, образует кортеж. Длина кортежа равна количеству выражений в списке. Выражения вычисляются слева направо.
Звёздочка * обозначает распаковку итерируемого объекта. Её операндом должен быть
итерируемый объект. Итерируемый объект раскрывается в последовательность элементов,
которые включаются в новый кортеж, список или множество в месте
распаковки.
Добавлено в версии 3.5: Распаковка итерируемых объектов в списках выражений, изначально предложенная в PEP 448.
Добавлено в версии 3.11: Любой элемент в списке выражений может быть помечен звёздочкой. См. PEP 646.
Завершающая запятая требуется только для создания кортежа из одного элемента,
например 1,; во всех остальных случаях она необязательна.
Одиночное выражение без
завершающей запятой не создаёт кортеж, а возвращает значение этого
выражения. (Чтобы создать пустой кортеж, используйте пустую пару круглых скобок:
().)
6.16. Порядок вычисления¶Evaluation order
Python вычисляет выражения слева направо. Обратите внимание, что при вычислении присваивания сначала вычисляется правая часть, а затем левая.
В следующих строках выражения будут вычисляться в арифметическом порядке их суффиксов:
expr1, expr2, expr3, expr4
(expr1, expr2, expr3, expr4)
{expr1: expr2, expr3: expr4}
expr1 + expr2 * (expr3 - expr4)
expr1(expr2, expr3, *expr4, **expr5)
expr3, expr4 = expr1, expr2
6.17. Приоритет операторов¶Operator precedence
В следующей таблице представлен приоритет операторов в Python, от наивысшего приоритета (самая сильная связь) до наименьшего (самая слабая связь). Операторы в одной ячейке имеют одинаковый приоритет. Если синтаксис не указан явно, операторы являются бинарными. Операторы в одной ячейке группируются слева направо (за исключением возведения в степень и условных выражений, которые группируются справа налево).
Сравнения, проверки принадлежности и проверки тождественности имеют одинаковый приоритет и связываются слева направо, как описано в разделе Сравнения.
Оператор |
Описание |
|---|---|
|
Связывание или выражение в скобках, список, словарь, множество |
|
Индексация (включая срезы), вызов, ссылка на атрибут |
Выражение await |
|
|
Возведение в степень [5] |
|
Унарный плюс, унарный минус, побитовое НЕ |
|
Умножение, матричное умножение, деление, целочисленное деление, остаток [6] |
|
Сложение и вычитание |
|
Сдвиги |
|
Побитовое И |
|
Побитовое исключающее ИЛИ |
|
Побитовое ИЛИ |
Сравнения, включая проверки принадлежности и тождественности |
|
Логическое НЕ |
|
Логическое И |
|
Логическое ИЛИ |
|
|
Условное выражение |
Лямбда-выражение |
|
|
Выражение присваивания |
Сноски
Эта страница – перевод. Оригинал на английском – docs.python.org. Нашли неточность? Сообщите нам.