`mmap.md`

325 строк · 25.1 КБ · обычная страница · сырой текст · скачать
1> **Источник:** https://python-all.ru/3.14/library/mmap.html2>3> «Документация Python на русском» – неофициальный перевод официальной документации Python: версии от 2.6 до 3.16, полнотекстовый поиск, английский оригинал рядом с переводом. Эта Markdown-версия страницы предназначена для работы с LLM: вставьте её в ChatGPT, Claude или Cursor.45---67# `mmap` – Поддержка файлов с отображением в память89---1011[Доступность](https://python-all.ru/3.14/library/intro.html#availability): не WASI.1213Этот модуль не работает или недоступен на WebAssembly. Подробнее см. [платформы WebAssembly](https://python-all.ru/3.14/library/intro.html#wasm-availability).1415Объекты файлов с отображением в память ведут себя и как [`bytearray`](https://python-all.ru/3.14/library/stdtypes.html#bytearray), и как [файловые объекты](https://python-all.ru/3.14/glossary.html#term-file-object). Объекты mmap можно использовать почти везде, где ожидаются `bytearray`; например, можно использовать модуль [`re`](https://python-all.ru/3.14/library/re.html#module-re) для поиска в файле с отображением в память. Также можно изменить один байт, выполнив `obj[index] = 97`, или изменить подпоследовательность, присвоив значение срезу: `obj[i1:i2] = b'...'`. Кроме того, можно читать и записывать данные, начиная с текущей позиции в файле, и `seek()` по файлу в разные позиции.1617Файл с отображением в память создаётся конструктором [`mmap`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap), который отличается на Unix и Windows. В любом случае необходимо предоставить файловый дескриптор файла, открытого для обновления. Если требуется отобразить существующий файловый объект Python, используйте его метод [`fileno()`](https://python-all.ru/3.14/library/io.html#io.IOBase.fileno), чтобы получить правильное значение параметра *fileno*. В противном случае можно открыть файл с помощью функции [`os.open()`](https://python-all.ru/3.14/library/os.html#os.open), которая напрямую возвращает файловый дескриптор (файл всё равно нужно закрыть после использования).1819> **Примечание**20>21> Если нужно создать отображение в память для буферизованного файла, доступного для записи, сначала следует [`flush()`](https://python-all.ru/3.14/library/io.html#io.IOBase.flush) файл. Это необходимо, чтобы локальные изменения в буферах были доступны для отображения.2223Для версий конструктора как для Unix, так и для Windows, *access* может быть указан как необязательный именованный параметр. *access* принимает одно из четырёх значений: `ACCESS_READ`, `ACCESS_WRITE` или `ACCESS_COPY` для указания памяти только для чтения, сквозной записи или копирования при записи соответственно, или `ACCESS_DEFAULT`, чтобы обратиться к *prot*. *access* можно использовать как в Unix, так и в Windows. Если *access* не задан, Windows mmap возвращает отображение со сквозной записью. Начальные значения памяти для всех трёх типов доступа берутся из указанного файла. Присваивание `ACCESS_READ` отображению памяти вызывает исключение [`TypeError`](https://python-all.ru/3.14/library/exceptions.html#TypeError). Присваивание `ACCESS_WRITE` отображению памяти влияет и на память, и на базовый файл. Присваивание `ACCESS_COPY` отображению памяти влияет на память, но не обновляет базовый файл.2425Изменено в версии 3.7: Добавлена константа `ACCESS_DEFAULT`.2627Для отображения анонимной памяти в качестве fileno следует передать -1 вместе с длиной.2829#### `class mmap.mmap(fileno, length, tagname=None, access=ACCESS_DEFAULT, offset=0)`3031**(Версия Windows)** Отображает *length* байтов из файла, указанного файловым дескриптором *fileno*, и создаёт объект mmap. Если *length* больше текущего размера файла, файл расширяется до *length* байтов. Если *length* равно `0`, максимальная длина отображения равна текущему размеру файла, за исключением случая, когда файл пуст – тогда Windows вызывает исключение (нельзя создать пустое отображение в Windows).3233*tagname*, если указан и не равен `None`, представляет собой строку, задающую имя тега для отображения. Windows позволяет иметь множество разных отображений одного и того же файла. Если указать имя существующего тега, открывается этот тег, иначе создаётся новый тег с таким именем. Если этот параметр опущен или равен `None`, отображение создаётся без имени. Отказ от использования параметра *tagname* поможет сохранить переносимость кода между Unix и Windows.3435*offset* может быть указан как неотрицательное целое смещение. Ссылки mmap будут относительными к смещению от начала файла. *offset* по умолчанию равен 0. *offset* должен быть кратен `ALLOCATIONGRANULARITY`.3637Возбуждает [событие аудита](https://python-all.ru/3.14/library/sys.html#auditing) `mmap.__new__` с аргументами `fileno`, `length`, `access`, `offset`.3839#### `class mmap.mmap(fileno, length, flags=MAP_SHARED, prot=PROT_WRITE | PROT_READ, access=ACCESS_DEFAULT, offset=0, *, trackfd=True)`4041**(Версия Unix)** Отображает *length* байтов из файла, указанного файловым дескриптором *fileno*, и возвращает объект mmap. Если *length* равно `0`, максимальная длина отображения будет равна текущему размеру файла на момент вызова [`mmap`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap).4243*flags* задаёт характер отображения. [`MAP_PRIVATE`](https://python-all.ru/3.14/library/mmap.html#mmap.MAP_PRIVATE) создаёт частное отображение с копированием при записи, поэтому изменения содержимого объекта mmap будут приватными для этого процесса, а [`MAP_SHARED`](https://python-all.ru/3.14/library/mmap.html#mmap.MAP_SHARED) создаёт отображение, разделяемое со всеми другими процессами, отображающими те же области файла. Значение по умолчанию – `MAP_SHARED`. В некоторых системах есть дополнительные возможные флаги; полный список указан в [константах MAP\_\*](https://python-all.ru/3.14/library/mmap.html#map-constants).4445*prot*, если указан, задаёт желаемую защиту памяти; два наиболее полезных значения – `PROT_READ` и `PROT_WRITE`, чтобы указать, что страницы можно читать или записывать. *prot* по умолчанию равен `PROT_READ | PROT_WRITE`.4647*access* может быть указан вместо *flags* и *prot* как необязательный именованный параметр. Указывать одновременно *flags*, *prot* и *access* – ошибка. Информацию о том, как использовать этот параметр, см. в описании *access* выше.4849*offset* может быть указан как неотрицательное целое смещение. Ссылки mmap будут относительными к смещению от начала файла. *offset* по умолчанию равен 0. *offset* должен быть кратен `ALLOCATIONGRANULARITY`, что в системах Unix равно `PAGESIZE`.5051Если *trackfd* равен `False`, файловый дескриптор, указанный *fileno*, не будет дублироваться, и результирующий объект `mmap` не будет связан с базовым файлом отображения. Это означает, что методы [`size()`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap.size) и [`resize()`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap.resize) завершатся ошибкой. Этот режим полезен для ограничения количества открытых файловых дескрипторов.5253Чтобы обеспечить корректность созданного отображения памяти, файл, указанный дескриптором *fileno*, на macOS автоматически синхронизируется с физическим хранилищем.5455Изменено в версии 3.13: Добавлен параметр *trackfd*.5657В этом примере показан простой способ использования [`mmap`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap):5859```python60import mmap6162# записать простой пример файла63with open("hello.txt", "wb") as f:64    f.write(b"Hello Python!\n")6566with open("hello.txt", "r+b") as f:67    # отобразить файл в память, размер 0 означает весь файл68    mm = mmap.mmap(f.fileno(), 0)69    # прочитать содержимое с помощью стандартных методов файла70    print(mm.readline())  # выводит b"Hello Python!\n"71    # чтение содержимого с помощью срезовой нотации72    print(mm[:5])  # выводит b"Hello"73    # обновление содержимого с помощью срезовой нотации;74    # новое содержимое должно быть того же размера75    mm[6:] = b" world!\n"76    # ... и снова прочитать стандартными методами файлов77    mm.seek(0)78    print(mm.readline())  # выводит b"Hello  world!\n"79    # закрыть отображение80    mm.close()81```8283[`mmap`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap) также можно использовать как контекстный менеджер в операторе [`with`](https://python-all.ru/3.14/reference/compound_stmts.html#with):8485```python86import mmap8788with mmap.mmap(-1, 13) as mm:89    mm.write(b"Hello world!")90```9192Добавлено в версии 3.2: Поддержка контекстного менеджера.9394Следующий пример демонстрирует, как создать анонимное отображение и обмениваться данными между родительским и дочерним процессами:9596```python97import mmap98import os99100mm = mmap.mmap(-1, 13)101mm.write(b"Hello world!")102103pid = os.fork()104105if pid == 0:  # В дочернем процессе106    mm.seek(0)107    print(mm.readline())108109    mm.close()110```111112Возбуждает [событие аудита](https://python-all.ru/3.14/library/sys.html#auditing) `mmap.__new__` с аргументами `fileno`, `length`, `access`, `offset`.113114Объекты файлов с отображением в память поддерживают следующие методы:115116#### `close()`117118Закрывает mmap. Последующие вызовы других методов объекта приведут к возникновению исключения ValueError. Открытый файл при этом не закрывается.119120#### `closed`121122`True`, если файл закрыт.123124Добавлено в версии 3.2.125126#### `find(sub[, start[, end]])`127128Возвращает наименьший индекс в объекте, где встречается подпоследовательность *sub*, при условии, что *sub* содержится в диапазоне \[*start*, *end*\]. Необязательные аргументы *start* и *end* интерпретируются как в записи среза. В случае неудачи возвращает `-1`.129130Изменено в версии 3.5: Теперь принимается записываемый [байтоподобный объект](https://python-all.ru/3.14/glossary.html#term-bytes-like-object).131132#### `flush()`133134#### `flush(offset, size, /)`135136Сбрасывает изменения, внесённые в копию файла в памяти, обратно на диск. Без использования этого вызова нет гарантии, что изменения будут записаны до того, как объект будет уничтожен. Если *offset* и *size* заданы, на диск будут сброшены только изменения в указанном диапазоне байтов; в противном случае сбрасывается вся область отображения. *offset* должен быть кратен `PAGESIZE` или `ALLOCATIONGRANULARITY`.137138`None` возвращается в случае успеха. Исключение возбуждается, если вызов завершился неудачей.139140Изменено в версии 3.8: Ранее возвращалось ненулевое значение при успехе; под Windows возвращался нуль при ошибке. Под Unix возвращался нуль при успехе и возбуждалось исключение при ошибке.141142#### `madvise(option[, start[, length]])`143144Отправляет ядру рекомендацию *option* для области памяти, начинающейся с *start* и простирающейся на *length* байт. *option* должен быть одной из констант [MADV\_\* constants](https://python-all.ru/3.14/library/mmap.html#madvise-constants), доступных в системе. Если *start* и *length* опущены, затрагивается всё отображение. На некоторых системах (включая Linux) *start* должен быть кратен `PAGESIZE`.145146Доступность: системы с системным вызовом `madvise()`.147148Добавлено в версии 3.8.149150#### `move(dest, src, count)`151152Копирует *count* байт, начиная со смещения *src*, в индекс назначения *dest*. Если mmap был создан с `ACCESS_READ`, то вызовы move вызовут исключение [`TypeError`](https://python-all.ru/3.14/library/exceptions.html#TypeError).153154#### `read([n])`155156Возвращает [`bytes`](https://python-all.ru/3.14/library/stdtypes.html#bytes), содержащий до *n* байт, начиная с текущей позиции в файле. Если аргумент опущен, равен `None` или отрицательному значению, возвращаются все байты от текущей позиции до конца отображения. Позиция в файле обновляется так, чтобы указывать на байты после возвращённых.157158Изменено в версии 3.3: Аргумент можно опустить или задать `None`.159160#### `read_byte()`161162Возвращает байт в текущей позиции файла в виде целого числа и увеличивает позицию файла на 1.163164#### `readline()`165166Возвращает одну строку, начиная с текущей позиции файла и до следующего символа новой строки. Позиция файла обновляется так, чтобы указывать на байты после возвращённых.167168#### `resize(newsize)`169170Изменяет размер отображения и соответствующего файла, если он существует.171172Изменение размера отображения, созданного с *access* равным `ACCESS_READ` или `ACCESS_COPY`, вызовет исключение [`TypeError`](https://python-all.ru/3.14/library/exceptions.html#TypeError). Изменение размера отображения, созданного с *trackfd*, установленным в `False`, вызовет исключение [`ValueError`](https://python-all.ru/3.14/library/exceptions.html#ValueError).173174**В Windows**: изменение размера отображения вызовет [`OSError`](https://python-all.ru/3.14/library/exceptions.html#OSError), если существуют другие отображения того же именованного файла. Изменение размера анонимного отображения (т.е. основанного на файле подкачки) беззвучно создаст новое отображение с копией исходных данных до длины нового размера.175176Изменено в версии 3.11: Корректно завершается ошибкой при попытке изменить размер, если удерживается другое отображение. Разрешает изменение размера анонимного отображения в Windows.177178#### `rfind(sub[, start[, end]])`179180Возвращает наибольший индекс в объекте, где найдена подпоследовательность *sub*, такой, что *sub* содержится в диапазоне \[*start*, *end*\]. Необязательные аргументы *start* и *end* интерпретируются как в нотации среза. Возвращает `-1` при неудаче.181182Изменено в версии 3.5: Теперь принимается записываемый [байтоподобный объект](https://python-all.ru/3.14/glossary.html#term-bytes-like-object).183184#### `seek(pos[, whence])`185186Устанавливает текущую позицию в файле. Аргумент *whence* необязателен и по умолчанию равен `os.SEEK_SET` или `0` (абсолютное позиционирование); другие значения: `os.SEEK_CUR` или `1` (смещение относительно текущей позиции) и `os.SEEK_END` или `2` (смещение относительно конца файла).187188Изменено в версии 3.13: Возвращает новую абсолютную позицию вместо `None`.189190#### `seekable()`191192Возвращает, поддерживает ли файл позиционирование; возвращаемое значение всегда `True`.193194Добавлено в версии 3.13.195196#### `size()`197198Возвращает длину файла, которая может быть больше размера области отображения памяти.199200#### `tell()`201202Возвращает текущую позицию файлового указателя.203204#### `write(bytes)`205206Записывает байты из *bytes* в память в текущей позиции файлового указателя и возвращает количество записанных байт (всегда не меньше `len(bytes)`, так как в случае ошибки записи будет возбуждено исключение [`ValueError`](https://python-all.ru/3.14/library/exceptions.html#ValueError)). Позиция файла обновляется и указывает на байт сразу после записанных. Если отображение mmap было создано с `ACCESS_READ`, то запись в него вызовет исключение [`TypeError`](https://python-all.ru/3.14/library/exceptions.html#TypeError).207208Изменено в версии 3.5: Теперь принимается записываемый [байтоподобный объект](https://python-all.ru/3.14/glossary.html#term-bytes-like-object).209210Изменено в версии 3.6: Теперь возвращается количество записанных байт.211212#### `write_byte(byte)`213214Записывает целое число *byte* в память в текущей позиции файлового указателя; позиция файла увеличивается на `1`. Если отображение mmap было создано с `ACCESS_READ`, то запись в него вызовет исключение [`TypeError`](https://python-all.ru/3.14/library/exceptions.html#TypeError).215216## Константы MADV\_\*217218#### `mmap.MADV_NORMAL`219220#### `mmap.MADV_RANDOM`221222#### `mmap.MADV_SEQUENTIAL`223224#### `mmap.MADV_WILLNEED`225226#### `mmap.MADV_DONTNEED`227228#### `mmap.MADV_REMOVE`229230#### `mmap.MADV_DONTFORK`231232#### `mmap.MADV_DOFORK`233234#### `mmap.MADV_HWPOISON`235236#### `mmap.MADV_MERGEABLE`237238#### `mmap.MADV_UNMERGEABLE`239240#### `mmap.MADV_SOFT_OFFLINE`241242#### `mmap.MADV_HUGEPAGE`243244#### `mmap.MADV_NOHUGEPAGE`245246#### `mmap.MADV_DONTDUMP`247248#### `mmap.MADV_DODUMP`249250#### `mmap.MADV_FREE`251252#### `mmap.MADV_NOSYNC`253254#### `mmap.MADV_AUTOSYNC`255256#### `mmap.MADV_NOCORE`257258#### `mmap.MADV_CORE`259260#### `mmap.MADV_PROTECT`261262#### `mmap.MADV_FREE_REUSABLE`263264#### `mmap.MADV_FREE_REUSE`265266Эти параметры можно передать [`mmap.madvise()`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap.madvise). Не все параметры доступны на всех системах.267268Доступность: системы с системным вызовом madvise().269270Добавлено в версии 3.8.271272## Константы MAP\_\*273274#### `mmap.MAP_SHARED`275276#### `mmap.MAP_PRIVATE`277278#### `mmap.MAP_32BIT`279280#### `mmap.MAP_ALIGNED_SUPER`281282#### `mmap.MAP_ANON`283284#### `mmap.MAP_ANONYMOUS`285286#### `mmap.MAP_CONCEAL`287288#### `mmap.MAP_DENYWRITE`289290#### `mmap.MAP_EXECUTABLE`291292#### `mmap.MAP_HASSEMAPHORE`293294#### `mmap.MAP_JIT`295296#### `mmap.MAP_NOCACHE`297298#### `mmap.MAP_NOEXTEND`299300#### `mmap.MAP_NORESERVE`301302#### `mmap.MAP_POPULATE`303304#### `mmap.MAP_RESILIENT_CODESIGN`305306#### `mmap.MAP_RESILIENT_MEDIA`307308#### `mmap.MAP_STACK`309310#### `mmap.MAP_TPRO`311312#### `mmap.MAP_TRANSLATED_ALLOW_EXECUTE`313314#### `mmap.MAP_UNIX03`315316Это различные флаги, которые можно передать [`mmap.mmap()`](https://python-all.ru/3.14/library/mmap.html#mmap.mmap). `MAP_ALIGNED_SUPER` доступен только во FreeBSD, а `MAP_CONCEAL` – только в OpenBSD. Учтите, что некоторые параметры могут отсутствовать на отдельных системах.317318Изменено в версии 3.10: Добавлена константа `MAP_POPULATE`.319320Добавлено в версии 3.11: Добавлена константа `MAP_STACK`.321322Добавлено в версии 3.12: Добавлены константы `MAP_ALIGNED_SUPER` и `MAP_CONCEAL`.323324Добавлено в версии 3.13: Добавлены константы `MAP_32BIT`, `MAP_HASSEMAPHORE`, `MAP_JIT`, `MAP_NOCACHE`, `MAP_NOEXTEND`, `MAP_NORESERVE`, `MAP_RESILIENT_CODESIGN`, `MAP_RESILIENT_MEDIA`, `MAP_TPRO`, `MAP_TRANSLATED_ALLOW_EXECUTE` и `MAP_UNIX03`.325