lzma.md
1> **Источник:** https://python-all.ru/3/library/lzma.html2>3> «Документация Python на русском» – неофициальный перевод официальной документации Python: версии от 2.6 до 3.16, полнотекстовый поиск, английский оригинал рядом с переводом. Эта Markdown-версия страницы предназначена для работы с LLM: вставьте её в ChatGPT, Claude или Cursor.45---67# `lzma` – Сжатие с использованием алгоритма LZMA89Добавлено в версии 3.3.1011**Исходный код:** [Lib/lzma.py](https://python-all.ru/src/3.14/Lib/lzma.py)1213---1415Этот модуль предоставляет классы и вспомогательные функции для сжатия и распаковки данных с помощью алгоритма сжатия LZMA. Также включен файловый интерфейс, поддерживающий форматы файлов `.xz` и устаревший `.lzma`, используемые утилитой **xz**, а также сырые сжатые потоки.1617Интерфейс, предоставляемый этим модулем, очень похож на интерфейс модуля [`bz2`](https://python-all.ru/3/library/bz2.html#module-bz2). Обратите внимание, что [`LZMAFile`](https://python-all.ru/3/library/lzma.html#lzma.LZMAFile) и [`bz2.BZ2File`](https://python-all.ru/3/library/bz2.html#bz2.BZ2File) *не* являются потокобезопасными, поэтому, если требуется использовать один экземпляр `LZMAFile` из нескольких потоков, необходимо защищать его блокировкой.1819Это [опциональный модуль](https://python-all.ru/3/glossary.html#term-optional-module). Если его нет в вашей копии CPython, обратитесь к документации от вашего дистрибьютора (то есть того, кто предоставил вам Python). Если вы дистрибьютор, обратитесь к [требованиям к опциональным модулям](https://python-all.ru/3/using/configure.html#optional-module-requirements).2021#### `exception lzma.LZMAError`2223Это исключение возникает при ошибке во время сжатия или распаковки, а также при инициализации состояния компрессора/декодера.2425## Чтение и запись сжатых файлов2627#### `lzma.open(filename, mode='rb', *, format=None, check=-1, preset=None, filters=None, encoding=None, errors=None, newline=None)`2829Открывает LZMA-сжатый файл в двоичном или текстовом режиме и возвращает [файловый объект](https://python-all.ru/3/glossary.html#term-file-object).3031Аргумент *filename* может быть как именем файла (в виде [`str`](https://python-all.ru/3/library/stdtypes.html#str), [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes) или [path-like](https://python-all.ru/3/glossary.html#term-path-like-object) объекта), в этом случае открывается указанный файл, так и существующим файловым объектом для чтения или записи.3233Аргумент *mode* может быть любым из `"r"`, `"rb"`, `"w"`, `"wb"`, `"x"`, `"xb"`, `"a"` или `"ab"` для бинарного режима, или `"rt"`, `"wt"`, `"xt"` или `"at"` для текстового режима. По умолчанию `"rb"`.3435При открытии файла для чтения аргументы *format* и *filters* имеют то же значение, что и для [`LZMADecompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor). В этом случае аргументы *check* и *preset* не должны использоваться.3637При открытии файла для записи аргументы *format*, *check*, *preset* и *filters* имеют то же значение, что и для [`LZMACompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMACompressor).3839В двоичном режиме эта функция эквивалентна конструктору [`LZMAFile`](https://python-all.ru/3/library/lzma.html#lzma.LZMAFile): `LZMAFile(filename, mode, ...)`. В этом случае аргументы *encoding*, *errors* и *newline* указывать нельзя.4041Для текстового режима создаётся объект [`LZMAFile`](https://python-all.ru/3/library/lzma.html#lzma.LZMAFile), обёрнутый в экземпляр [`io.TextIOWrapper`](https://python-all.ru/3/library/io.html#io.TextIOWrapper) с указанными кодировкой, поведением при ошибках и символами конца строки.4243Изменено в версии 3.4: Добавлена поддержка режимов `"x"`, `"xb"` и `"xt"`.4445Изменено в версии 3.6: Принимает [объект, подобный пути](https://python-all.ru/3/glossary.html#term-path-like-object).4647#### `class lzma.LZMAFile(filename=None, mode='r', *, format=None, check=-1, preset=None, filters=None)`4849Открывает LZMA-сжатый файл в двоичном режиме.5051`LZMAFile` может обернуть уже открытый [файловый объект](https://python-all.ru/3/glossary.html#term-file-object) или работать напрямую с именованным файлом. Аргумент *filename* указывает либо оборачиваемый файловый объект, либо имя открываемого файла (в виде [`str`](https://python-all.ru/3/library/stdtypes.html#str), [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes) или [path-like](https://python-all.ru/3/glossary.html#term-path-like-object) объекта). При обёртывании существующего файлового объекта обёрнутый файл не будет закрыт при закрытии `LZMAFile`.5253Аргумент *mode* может быть `"r"` для чтения (по умолчанию), `"w"` для перезаписи, `"x"` для исключительного создания или `"a"` для добавления. Им эквивалентно соответствуют `"rb"`, `"wb"`, `"xb"` и `"ab"` соответственно.5455Если *filename* – файловый объект (а не фактическое имя файла), режим `"w"` не усекает файл, а вместо этого эквивалентен `"a"`.5657При открытии файла для чтения входной файл может быть объединением нескольких отдельных сжатых потоков. Они прозрачно декодируются как единый логический поток.5859При открытии файла для чтения аргументы *format* и *filters* имеют то же значение, что и для [`LZMADecompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor). В этом случае аргументы *check* и *preset* не должны использоваться.6061При открытии файла для записи аргументы *format*, *check*, *preset* и *filters* имеют то же значение, что и для [`LZMACompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMACompressor).6263`LZMAFile` поддерживает все члены, указанные в [`io.BufferedIOBase`](https://python-all.ru/3/library/io.html#io.BufferedIOBase), за исключением [`detach()`](https://python-all.ru/3/library/io.html#io.BufferedIOBase.detach) и [`truncate()`](https://python-all.ru/3/library/io.html#io.IOBase.truncate). Поддерживаются итерация и оператор [`with`](https://python-all.ru/3/reference/compound_stmts.html#with).6465Также предоставляются следующие методы и атрибуты:6667#### `peek(size=-1)`6869Возвращает буферизованные данные, не сдвигая позицию в файле. Будет возвращён как минимум один байт данных, если не достигнут EOF. Точное количество возвращаемых байт не определено (аргумент *size* игнорируется).7071> **Примечание**72>73> Хотя вызов `peek()` не изменяет позицию файла в `LZMAFile`, он может изменить позицию нижележащего файлового объекта (например, если `LZMAFile` был создан путём передачи файлового объекта в качестве *filename*).7475#### `mode`7677`'rb'` для чтения и `'wb'` для записи.7879Добавлено в версии 3.13.8081#### `name`8283Имя lzma-файла. Эквивалентно атрибуту [`name`](https://python-all.ru/3/library/io.html#io.FileIO.name) нижележащего [файлового объекта](https://python-all.ru/3/glossary.html#term-file-object).8485Добавлено в версии 3.13.8687Изменено в версии 3.4: Добавлена поддержка режимов `"x"` и `"xb"`.8889Изменено в версии 3.5: Метод [`read()`](https://python-all.ru/3/library/io.html#io.BufferedIOBase.read) теперь принимает аргумент типа `None`.9091Изменено в версии 3.6: Принимает [объект, подобный пути](https://python-all.ru/3/glossary.html#term-path-like-object).9293## Сжатие и распаковка данных в памяти9495#### `class lzma.LZMACompressor(format=FORMAT_XZ, check=-1, preset=None, filters=None)`9697Создаёт объект компрессора, который можно использовать для пошагового сжатия данных.9899Более удобный способ сжатия одного блока данных – [`compress()`](https://python-all.ru/3/library/lzma.html#lzma.compress).100101Аргумент *format* указывает, какой формат контейнера следует использовать. Возможные значения:102103- **`FORMAT_XZ`: формат контейнера `.xz`.**104105 Это формат по умолчанию.106- **`FORMAT_ALONE`: устаревший формат контейнера `.lzma`.**107108 Этот формат более ограничен по сравнению с `.xz` – он не поддерживает проверки целостности и несколько фильтров.109- **`FORMAT_RAW`: необработанный поток данных без использования контейнерного формата.**110111 Этот спецификатор формата не поддерживает проверку целостности и требует всегда указывать собственную цепочку фильтров (как для сжатия, так и для распаковки). Кроме того, данные, сжатые таким образом, невозможно распаковать с помощью `FORMAT_AUTO` (см. [`LZMADecompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor)).112113Аргумент *check* определяет тип проверки целостности, включаемой в сжатые данные. Эта проверка используется при распаковке для контроля целостности данных. Возможные значения:114115- `CHECK_NONE`: без проверки целостности. Это значение по умолчанию (и единственное допустимое) для `FORMAT_ALONE` и `FORMAT_RAW`.116- `CHECK_CRC32`: 32-битный CRC (циклическая проверка избыточности).117- `CHECK_CRC64`: 64-битный CRC (циклическая проверка избыточности). Это значение по умолчанию для `FORMAT_XZ`.118- `CHECK_SHA256`: 256-битный алгоритм безопасного хеширования (SHA-256).119120Если указанная проверка не поддерживается, вызывается исключение [`LZMAError`](https://python-all.ru/3/library/lzma.html#lzma.LZMAError).121122Настройки сжатия можно задать либо как предустановленный уровень сжатия (с помощью аргумента *preset*), либо детально, как собственную цепочку фильтров (с помощью аргумента *filters*).123124Аргумент *preset* (если указан) должен быть целым числом от `0` до `9` включительно, возможно, с побитовым ИЛИ с константой `PRESET_EXTREME`. Если не заданы ни *preset*, ни *filters*, поведение по умолчанию – использовать `PRESET_DEFAULT` (уровень предустановки `6`). Более высокие уровни дают меньший выходной объём, но замедляют процесс сжатия.125126> **Примечание**127>128> Помимо большей нагрузки на процессор, сжатие с более высокими уровнями предустановок также требует значительно больше памяти (и выдаёт выходные данные, которым для распаковки требуется больше памяти). Например, для уровня `9` накладные расходы для объекта `LZMACompressor` могут достигать 800 МиБ. По этой причине обычно лучше придерживаться уровня по умолчанию.129130Аргумент *filters* (если указан) должен задавать цепочку фильтров. Подробнее см. [Задание собственных цепочек фильтров](https://python-all.ru/3/library/lzma.html#filter-chain-specs).131132#### `compress(data)`133134Сжимает *data* (объект [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes)) и возвращает объект `bytes`, содержащий сжатые данные хотя бы для части входных данных. Часть *data* может быть буферизована внутри для использования в последующих вызовах `compress()` и [`flush()`](https://python-all.ru/3/library/lzma.html#lzma.LZMACompressor.flush). Возвращённые данные следует объединять с результатом всех предыдущих вызовов `compress()`.135136#### `flush()`137138Завершает процесс сжатия, возвращая объект [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes), содержащий данные, хранящиеся во внутренних буферах компрессора.139140Компрессор нельзя использовать после вызова этого метода.141142#### `class lzma.LZMADecompressor(format=FORMAT_AUTO, memlimit=None, filters=None)`143144Создаёт объект декомпрессора, который можно использовать для инкрементальной декомпрессии данных.145146Более удобный способ распаковки всего сжатого потока за один раз см. в [`decompress()`](https://python-all.ru/3/library/lzma.html#lzma.decompress).147148Аргумент *format* задаёт используемый контейнерный формат. Значение по умолчанию – `FORMAT_AUTO`, которое позволяет распаковывать файлы как `.xz`, так и `.lzma`. Другие возможные значения: `FORMAT_XZ`, `FORMAT_ALONE`, `FORMAT_RAW`.149150Аргумент *memlimit* задаёт ограничение (в байтах) на объём памяти, который может использовать распаковщик. При использовании этого аргумента распаковка завершится с исключением [`LZMAError`](https://python-all.ru/3/library/lzma.html#lzma.LZMAError), если входные данные невозможно распаковать в пределах заданного лимита памяти.151152Аргумент *filters* задаёт цепочку фильтров, использованную при создании распаковываемого потока. Этот аргумент обязателен, если *format* равен `FORMAT_RAW`, но не должен использоваться для других форматов. Дополнительную информацию о цепочках фильтров см. в [Задание собственных цепочек фильтров](https://python-all.ru/3/library/lzma.html#filter-chain-specs).153154> **Примечание**155>156> В отличие от [`decompress()`](https://python-all.ru/3/library/lzma.html#lzma.decompress) и [`LZMAFile`](https://python-all.ru/3/library/lzma.html#lzma.LZMAFile), этот класс не обрабатывает прозрачно входные данные, содержащие несколько сжатых потоков. Чтобы распаковать многопоточный вход с помощью `LZMADecompressor`, необходимо создавать новый распаковщик для каждого потока.157158#### `decompress(data, max_length=-1)`159160Декомпрессирует *data* ([байтоподобный объект](https://python-all.ru/3/glossary.html#term-bytes-like-object)), возвращая несжатые данные в виде байтов. Часть *data* может буферизироваться внутренне для использования в последующих вызовах `decompress()`. Возвращаемые данные следует объединять с результатом любых предыдущих вызовов `decompress()`.161162Если *max\_length* неотрицательно, возвращает не более *max\_length* байтов декомпрессированных данных. Если этот лимит достигнут и может быть сгенерирован дальнейший вывод, атрибут [`needs_input`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor.needs_input) будет установлен в `False`. В этом случае следующий вызов `decompress()` может передать *data* как `b''` для получения ещё вывода.163164Если все входные данные были декомпрессированы и возвращены (либо потому что это было меньше *max\_length* байтов, либо потому что *max\_length* было отрицательным), атрибут [`needs_input`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor.needs_input) будет установлен в `True`.165166Попытка декомпрессировать данные после достижения конца потока вызывает [`EOFError`](https://python-all.ru/3/library/exceptions.html#EOFError). Любые данные, обнаруженные после конца потока, игнорируются и сохраняются в атрибуте [`unused_data`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor.unused_data).167168Изменено в версии 3.5: Добавлен параметр *max\_length*.169170#### `check`171172Идентификатор проверки целостности, используемой входным потоком. Может быть `CHECK_UNKNOWN`, пока не будет декодировано достаточно входных данных, чтобы определить, какая проверка целостности используется.173174#### `eof`175176`True`, если достигнут маркер конца потока.177178#### `unused_data`179180Данные, обнаруженные после конца сжатого потока.181182До достижения конца потока это будет `b""`.183184#### `needs_input`185186`False`, если метод [`decompress()`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor.decompress) может предоставить больше декомпрессированных данных до запроса нового несжатого входа.187188Добавлено в версии 3.5.189190#### `lzma.compress(data, format=FORMAT_XZ, check=-1, preset=None, filters=None)`191192Сжимает *data* (объект [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes)) и возвращает сжатые данные в виде объекта `bytes`.193194Описание аргументов *format*, *check*, *preset* и *filters* см. выше в [`LZMACompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMACompressor).195196#### `lzma.decompress(data, format=FORMAT_AUTO, memlimit=None, filters=None)`197198Распаковывает *данные* (объект [`bytes`](https://python-all.ru/3/library/stdtypes.html#bytes)), возвращая распакованные данные в виде объекта `bytes`.199200Если *данные* представляют собой объединение нескольких разных сжатых потоков, распакуйте все эти потоки и верните объединённый результат.201202Описание аргументов *format*, *memlimit* и *filters* см. выше в [`LZMADecompressor`](https://python-all.ru/3/library/lzma.html#lzma.LZMADecompressor).203204## Разное205206#### `lzma.is_check_supported(check)`207208Возвращает `True`, если указанная проверка целостности поддерживается в этой системе.209210`CHECK_NONE` и `CHECK_CRC32` поддерживаются всегда. `CHECK_CRC64` и `CHECK_SHA256` могут быть недоступны, если используется версия **liblzma**, скомпилированная с ограниченным набором функций.211212## Указание пользовательских цепочек фильтров213214Спецификатор цепочки фильтров – это последовательность словарей, где каждый словарь содержит идентификатор и параметры одного фильтра. Каждый словарь должен содержать ключ `"id"` и может содержать дополнительные ключи для указания опций, зависящих от фильтра. Допустимые идентификаторы фильтров:215216- Фильтры сжатия:217218 - `FILTER_LZMA1` (для использования с `FORMAT_ALONE`)219 - `FILTER_LZMA2` (для использования с `FORMAT_XZ` и `FORMAT_RAW`)220- Дельта-фильтр:221222 - `FILTER_DELTA`223- Фильтры ветвления-вызова-перехода (BCJ):224225 - `FILTER_X86`226 - `FILTER_IA64`227 - `FILTER_ARM`228 - `FILTER_ARMTHUMB`229 - `FILTER_POWERPC`230 - `FILTER_SPARC`231232Цепочка фильтров может содержать до 4 фильтров и не может быть пустой. Последний фильтр в цепочке должен быть фильтром сжатия, а все остальные – дельта-фильтрами или фильтрами BCJ.233234Фильтры сжатия поддерживают следующие опции (указываются как дополнительные записи в словаре, представляющем фильтр):235236- `preset`: Предустановка сжатия, используемая как источник значений по умолчанию для параметров, которые не заданы явно.237- `dict_size`: Размер словаря в байтах. Должен быть в диапазоне от 4 КиБ до 1,5 ГиБ (включительно).238- `lc`: Количество бит контекста литералов.239- `lp`: Количество бит позиции литералов. Сумма `lc + lp` не должна превышать 4.240- `pb`: Количество бит позиции; должно быть не более 4.241- `mode`: `MODE_FAST` или `MODE_NORMAL`.242- `nice_len`: Что считать «подходящей длиной» для совпадения. Должно быть 273 или меньше.243- `mf`: Какой поисковик совпадений использовать – `MF_HC3`, `MF_HC4`, `MF_BT2`, `MF_BT3` или `MF_BT4`.244- `depth`: Максимальная глубина поиска, используемая искателем совпадений. 0 (по умолчанию) означает автоматический выбор на основе других параметров фильтра.245246Дельта-фильтр хранит разности между байтами, создавая в некоторых случаях более повторяющиеся входные данные для компрессора. Он поддерживает один параметр, `dist`. Он указывает расстояние между вычитаемыми байтами. Значение по умолчанию – 1, то есть вычисляются разности между соседними байтами.247248Фильтры BCJ предназначены для применения к машинному коду. Они преобразуют относительные переходы, вызовы и прыжки в коде в абсолютную адресацию с целью повышения избыточности, которую может использовать компрессор. Эти фильтры поддерживают один параметр, `start_offset`. Он задаёт адрес, который должен соответствовать началу входных данных. По умолчанию – 0.249250## Примеры251252Чтение сжатого файла:253254```python255import lzma256with lzma.open("file.xz") as f:257 file_content = f.read()258```259260Создание сжатого файла:261262```python263import lzma264data = b"Insert Data Here"265with lzma.open("file.xz", "w") as f:266 f.write(data)267```268269Сжатие данных в памяти:270271```python272import lzma273data_in = b"Insert Data Here"274data_out = lzma.compress(data_in)275```276277Инкрементальное сжатие:278279```python280import lzma281lzc = lzma.LZMACompressor()282out1 = lzc.compress(b"Some data\n")283out2 = lzc.compress(b"Another piece of data\n")284out3 = lzc.compress(b"Even more data\n")285out4 = lzc.flush()286# Объединить все частичные результаты:287result = b"".join([out1, out2, out3, out4])288```289290Запись сжатых данных в уже открытый файл:291292```python293import lzma294with open("file.xz", "wb") as f:295 f.write(b"This data will not be compressed\n")296 with lzma.open(f, "w") as lzf:297 lzf.write(b"This *will* be compressed\n")298 f.write(b"Not compressed\n")299```300301Создание сжатого файла с использованием пользовательской цепочки фильтров:302303```python304import lzma305my_filters = [306 {"id": lzma.FILTER_DELTA, "dist": 5},307 {"id": lzma.FILTER_LZMA2, "preset": 7 | lzma.PRESET_EXTREME},308]309with lzma.open("file.xz", "w", filters=my_filters) as f:310 f.write(b"blah blah blah")311```312