Содержание страницы
io – основные инструменты для работы с потоками данных¶io – Core tools for working with streams
Исходный код: Lib/io.py
Обзор¶Overview
Модуль io предоставляет основные средства Python для работы с различными
типами ввода-вывода. Существует три основных типа ввода-вывода: текстовый ввод-вывод, двоичный ввод-вывод
и необработанный ввод-вывод. Это общие категории, и для каждой из них могут использоваться различные хранилища.
Конкретный объект, относящийся к любой из этих категорий, называется файловым объектом. Другие распространённые термины – поток данных
и объект, подобный файлу.
Независимо от категории, каждый конкретный потоковый объект также обладает различными возможностями: он может быть только для чтения, только для записи или для чтения и записи. Он может также допускать произвольный доступ (перемещение вперёд или назад к любому месту) или только последовательный доступ (например, в случае сокета или канала).
Все потоки данных строго следят за типом передаваемых им данных. Например,
передача объекта str методу write() двоичного потока
вызовет TypeError. То же самое произойдёт при передаче объекта bytes
методу write() текстового потока.
Изменено в версии 3.3: Операции, которые раньше вызывали IOError, теперь вызывают OSError, поскольку
IOError теперь является псевдонимом OSError.
Текстовый ввод-вывод¶Text I/O
Текстовый ввод-вывод ожидает и возвращает объекты str. Это означает, что всякий раз,
когда хранилище изначально состоит из байтов (например, в случае файла),
кодирование и декодирование данных выполняется прозрачно, а также выполняется необязательное
преобразование символов новой строки, специфичных для платформы.
Самый простой способ создать текстовый поток – использовать open(), при необходимости
указав кодировку:
f = open("myfile.txt", "r", encoding="utf-8")
Текстовые потоки в памяти также доступны в виде объектов StringIO:
f = io.StringIO("some initial text data")
API текстовых потоков подробно описан в документации
TextIOBase.
Двоичный ввод-вывод¶Binary I/O
Двоичный ввод-вывод (также называемый буферизованным вводом-выводом) ожидает
байтоподобные объекты и возвращает объекты bytes.
Кодирование, декодирование или преобразование символов новой строки не выполняется. Эта
категория потоков может использоваться для всех видов нетекстовых данных, а также когда
требуется ручной контроль над обработкой текстовых данных.
Самый простой способ создать двоичный поток – использовать open() с 'b' в
строке режима:
f = open("myfile.jpg", "rb")
Двоичные потоки в памяти также доступны в виде объектов BytesIO:
f = io.BytesIO(b"some initial binary data: \x00\x01")
API двоичных потоков подробно описан в документации
BufferedIOBase.
Другие библиотечные модули могут предоставлять дополнительные способы создания текстовых или двоичных
потоков. См., например, socket.socket.makefile().
Необработанный ввод-вывод¶Raw I/O
Необработанный ввод-вывод (также называемый небуферизованным вводом-выводом) обычно используется как низкоуровневый строительный блок для двоичных и текстовых потоков; редко бывает полезно напрямую манипулировать необработанным потоком из пользовательского кода. Тем не менее, можно создать необработанный поток, открыв файл в двоичном режиме с отключённой буферизацией:
f = open("myfile.jpg", "rb", buffering=0)
API необработанных потоков подробно описан в документации RawIOBase.
Интерфейс модуля высокого уровня¶High-level Module Interface
-
io.DEFAULT_BUFFER_SIZE¶ Целое число, содержащее размер буфера по умолчанию, используемый классами буферизованного ввода-вывода модуля.
open()использует blksize файла (получаемый с помощьюos.stat()), если это возможно.
-
io.open(file, mode='r', buffering=-1, encoding=None, errors=None, newline=None, closefd=True, opener=None)¶ Это псевдоним для встроенной функции
open().
-
exception
io.BlockingIOError¶ Это псевдоним для встроенного исключения
BlockingIOError.
-
exception
io.UnsupportedOperation¶ Исключение, наследующее
OSErrorиValueError, которое вызывается, когда неподдерживаемая операция вызывается для потока.
Потоки в памяти¶In-memory streams
Также можно использовать str или байтоподобный объект в качестве файла для чтения и записи. Для строк StringIO может использоваться как файл, открытый в текстовом режиме. BytesIO может использоваться как файл, открытый в двоичном режиме. Оба обеспечивают полные возможности чтения и записи с произвольным доступом.
См. также
sysсодержит стандартные потоки ввода-вывода:
sys.stdin,sys.stdout, иsys.stderr.
Иерархия классов¶Class hierarchy
Реализация потоков ввода-вывода организована в виде иерархии классов. Сначала абстрактные базовые классы (ABC), которые используются для определения различных категорий потоков, затем конкретные классы, предоставляющие стандартные реализации потоков.
Примечание
Абстрактные базовые классы также предоставляют реализации по умолчанию некоторых методов, чтобы помочь реализации конкретных классов потоков. Например,
BufferedIOBaseпредоставляет неоптимизированные реализацииreadinto()иreadline().
На вершине иерархии ввода-вывода находится абстрактный базовый класс IOBase. Он определяет базовый интерфейс потока. Однако обратите внимание, что нет разделения между чтением и записью в потоки; реализации могут вызывать UnsupportedOperation, если они не поддерживают данную операцию.
ABC RawIOBase расширяет IOBase. Он занимается чтением и записью байтов в поток. FileIO является подклассом RawIOBase, чтобы предоставить интерфейс к файлам в файловой системе машины.
ABC BufferedIOBase занимается буферизацией необработанного потока байтов
(RawIOBase). Его подклассы BufferedWriter,
BufferedReader и BufferedRWPair буферизуют потоки данных, которые являются
читаемыми, записываемыми, а также одновременно читаемыми и записываемыми. BufferedRandom
предоставляет буферизованный интерфейс для потоков с произвольным доступом. Другой
подкласс BufferedIOBase, BytesIO, представляет собой поток байтов в памяти.
ABC TextIOBase, ещё один подкласс IOBase, работает с
потоками, байты которых представляют текст, и отвечает за кодирование и декодирование
в строки и из строк. TextIOWrapper, который расширяет его, представляет собой буферизованный текстовый
интерфейс к буферизованному необработанному потоку (BufferedIOBase). Наконец,
StringIO – это поток в памяти для текста.
Имена аргументов не являются частью спецификации, и только аргументы
open() предназначены для использования в качестве именованных аргументов.
В следующей таблице приведены абстрактные базовые классы, предоставляемые модулем io:
ABC |
Наследует |
Методы-заглушки |
Методы-примеси и свойства |
|---|---|---|---|
|
|
||
|
Наследуемые методы |
||
|
Наследуемые методы |
||
|
Наследуемые методы |
Базовые классы ввода-вывода¶I/O Base Classes
-
class
io.IOBase¶ Абстрактный базовый класс для всех классов ввода-вывода, работающий с потоками байтов. Отсутствует открытый конструктор.
Этот класс предоставляет пустые абстрактные реализации для многих методов, которые производные классы могут выборочно переопределять; реализации по умолчанию представляют файл, который нельзя читать, записывать или позиционировать.
Хотя
IOBaseне объявляетread()илиwrite(), поскольку их сигнатуры различаются, реализации и клиенты должны считать эти методы частью интерфейса. Кроме того, реализации могут возбуждатьValueError(илиUnsupportedOperation), когда вызываются неподдерживаемые ими операции.Базовый тип, используемый для двоичных данных, читаемых из файла или записываемых в файл, – это
bytes. Другие байтоподобные объекты также принимаются в качестве аргументов методов. Классы текстового ввода-вывода работают с даннымиstr.Обратите внимание, что вызов любого метода (даже запросов) для закрытого потока является неопределённым. В этом случае реализации могут возбудить
ValueError.IOBase(и его подклассы) поддерживает протокол итератора, то есть объектIOBaseможно перебирать, получая строки из потока. Строки определяются немного по-разному в зависимости от того, является ли поток двоичным (возвращает байты) или текстовым (возвращает строки символов). См.readline()ниже.IOBaseтакже является контекстным менеджером и поэтому поддерживает инструкциюwith. В этом примере file закрывается после завершения блока инструкцииwith– даже если возникло исключение:with open('spam.txt', 'w') as file: file.write('Spam and eggs!')
IOBaseпредоставляет следующие атрибуты данных и методы:-
close()¶ Сбрасывает буферы и закрывает этот поток. Этот метод не оказывает эффекта, если файл уже закрыт. После закрытия файла любая операция с файлом (например, чтение или запись) возбудит
ValueError.Для удобства допускается вызывать этот метод несколько раз; однако эффект будет иметь только первый вызов.
-
closed¶ True, если поток закрыт.
-
fileno()¶ Возвращает базовый файловый дескриптор (целое число) потока, если он существует. Если объект ввода-вывода не использует файловый дескриптор, возбуждается
OSError.
-
flush()¶ Сбрасывает буферы записи потока, если это применимо. Для потоков только для чтения и неблокирующих потоков эта операция ничего не делает.
-
isatty()¶ Возвращает
True, если поток данных является интерактивным (т.е. подключён к терминальному/tty-устройству).
-
readline(size=-1)¶ Читает и возвращает одну строку из потока. Если указан size, будет прочитано не более size байт.
Окончанием строки для бинарных файлов всегда является
b'\n'; для текстовых файлов аргумент newline функцииopen()позволяет выбрать распознаваемые окончания строк.
-
readlines(hint=-1)¶ Читает и возвращает список строк из потока. Можно указать hint для ограничения количества читаемых строк: чтение прекратится, когда общий размер (в байтах/символах) всех прочитанных строк превысит hint.
Обратите внимание, что по файловым объектам уже можно итерироваться с помощью
for line in file: ...без вызоваfile.readlines().
-
seek(offset, whence=SEEK_SET)¶ Устанавливает позицию в потоке на заданное байтовое offset. offset интерпретируется относительно позиции, указанной в whence. Значение по умолчанию для whence –
SEEK_SET. Допустимые значения для whence:SEEK_SETили0– начало потока (по умолчанию); offset должно быть нулевым или положительнымSEEK_CURили1– текущая позиция в потоке; offset может быть отрицательнымSEEK_ENDили2– конец потока; offset обычно отрицательный
Возвращает новую абсолютную позицию.
Новое в версии 3.1: Константы
SEEK_*.Новое в версии 3.3: Некоторые операционные системы могут поддерживать дополнительные значения, например
os.SEEK_HOLEилиos.SEEK_DATA. Допустимые значения для файла могут зависеть от того, открыт ли он в текстовом или двоичном режиме.
-
seekable()¶ Возвращает
True, если поток поддерживает произвольный доступ. ЕслиFalse,seek(),tell()иtruncate()вызовут исключениеOSError.
-
tell()¶ Возвращает текущую позицию в потоке.
-
truncate(size=None)¶ Изменяет размер потока до указанного size в байтах (или до текущей позиции, если size не указан). Текущая позиция в потоке не меняется. Такое изменение может увеличить или уменьшить текущий размер файла. При увеличении содержимое новой области файла зависит от платформы (в большинстве систем дополнительные байты заполняются нулями). Возвращается новый размер файла.
Изменено в версии 3.5: В Windows при расширении файлы теперь заполняются нулями.
-
writable()¶ Возвращает
True, если поток поддерживает запись. ЕслиFalse,write()иtruncate()вызовут исключениеOSError.
-
writelines(lines)¶ Записывает список строк в поток. Разделители строк не добавляются, поэтому обычно каждая переданная строка уже содержит разделитель в конце.
-
-
class
io.RawIOBase¶ Базовый класс для необработанного двоичного ввода-вывода. Он наследует
IOBase. Отсутствует открытый конструктор.Необработанный двоичный ввод-вывод обычно предоставляет низкоуровневый доступ к базовому устройству или API операционной системы и не пытается инкапсулировать его в высокоуровневые примитивы (это оставлено буферизованному и текстовому вводу-выводу, описанным далее на этой странице).
В дополнение к атрибутам и методам из
IOBase,RawIOBaseпредоставляет следующие методы:-
read(size=-1)¶ Читает из объекта до size байт и возвращает их. Для удобства, если size не указан или равен -1, возвращаются все байты до конца файла. В противном случае выполняется только один системный вызов. Может быть возвращено меньше size байт, если системный вызов вернул меньше size байт.
Если возвращается 0 байт, и size не было 0, это означает конец файла. Если объект находится в неблокирующем режиме и байты недоступны, возвращается
None.Реализация по умолчанию делегирует
readall()иreadinto().
-
readall()¶ Читает и возвращает все байты из потока до EOF, при необходимости выполняя несколько вызовов к потоку.
-
readinto(b)¶ Читает байты в предварительно выделенный, доступный для записи объект, подобный байтам b, и возвращает количество прочитанных байт. Например, b может быть
bytearray. Если объект находится в неблокирующем режиме и байты недоступны, возвращаетсяNone.
-
write(b)¶ Записывает заданный bytes-like object, b, в базовый сырой поток и возвращает количество записанных байт. Это количество может быть меньше длины b в байтах в зависимости от особенностей базового сырого потока, особенно если он находится в неблокирующем режиме.
Noneвозвращается, если сырой поток настроен не блокироваться и ни один байт не может быть сразу записан. Вызывающий код может освободить или изменить b после возврата этого метода, поэтому реализация должна обращаться к b только во время вызова метода.
-
-
class
io.BufferedIOBase¶ Базовый класс для двоичных потоков, поддерживающих тот или иной вид буферизации. Он наследует
IOBase. Отсутствует открытый конструктор.Основное отличие от
RawIOBaseзаключается в том, что методыread(),readinto()иwrite()будут пытаться (соответственно) прочитать столько входных данных, сколько запрошено, или потребить все переданные выходные данные, ценой, возможно, более одного системного вызова.Кроме того, эти методы могут вызывать
BlockingIOError, если базовый небуферизованный поток находится в неблокирующем режиме и не может принять или отдать достаточно данных; в отличие от своих аналогов изRawIOBase, они никогда не вернутNone.Кроме того, метод
read()не имеет реализации по умолчанию, которая делегируетreadinto().Типичная реализация
BufferedIOBaseне должна наследовать от реализацииRawIOBase, а должна оборачивать её, как это делаютBufferedWriterиBufferedReader.BufferedIOBaseпредоставляет или переопределяет следующие методы и атрибут в дополнение к тем, что есть вIOBase:-
raw¶ Базовый сырой поток (экземпляр
RawIOBase), с которым работаетBufferedIOBase. Это не является частью APIBufferedIOBaseи может отсутствовать в некоторых реализациях.
-
detach()¶ Отделяет базовый сырой поток от буфера и возвращает его.
После отсоединения сырого потока буфер переходит в нерабочее состояние.
Некоторые буферы, такие как
BytesIO, не имеют концепции одного сырого потока для возврата из этого метода. Они вызываютUnsupportedOperation.Новое в версии 3.1.
-
read(size=-1)¶ Читает и возвращает до size байт. Если аргумент опущен, равен
Noneили отрицателен, данные читаются и возвращаются до достижения EOF. Если поток уже в конце файла, возвращается пустой объектbytes.Если аргумент положителен, а базовый сырой поток не является интерактивным, может быть выполнено несколько сырых чтений, чтобы обеспечить требуемое количество байт (если только не достигнут EOF). Но для интерактивных сырых потоков будет выполнено не более одного сырого чтения, и короткий результат не означает, что EOF неизбежен.
Исключение
BlockingIOErrorвозбуждается, если базовый сырой поток находится в неблокирующем режиме и в данный момент не содержит данных.
-
read1([size])¶ Читает и возвращает до size байт, выполняя не более одного вызова метода
read()(илиreadinto()) базового сырого потока. Это может быть полезно при реализации собственной буферизации поверх объектаBufferedIOBase.Если size равен
-1(значение по умолчанию), возвращается произвольное количество байт (больше нуля, если только не достигнут EOF).
-
readinto(b)¶ Читает байты в предварительно выделенный, доступный для записи байтоподобный объект b и возвращает количество прочитанных байт. Например, b может быть
bytearray.Как и
read(), может быть выполнено несколько чтений из нижележащего сырого потока, если только последний не является интерактивным.Исключение
BlockingIOErrorвозбуждается, если нижележащий сырой поток находится в неблокирующем режиме и в данный момент не имеет доступных данных.
-
readinto1(b)¶ Читает байты в предварительно выделенный, доступный для записи байтоподобный объект b, используя не более одного вызова метода
read()(илиreadinto()) нижележащего сырого потока. Возвращает количество прочитанных байт.Исключение
BlockingIOErrorвозбуждается, если нижележащий сырой поток находится в неблокирующем режиме и в данный момент не имеет доступных данных.Новое в версии 3.5.
-
write(b)¶ Записывает данный байтоподобный объект, b, и возвращает количество записанных байт (всегда равное длине b в байтах, поскольку если запись завершается неудачей, возбуждается
OSError). В зависимости от реализации, эти байты могут быть сразу записаны в нижележащий поток или сохранены в буфере по соображениям производительности и задержки.В неблокирующем режиме возбуждается
BlockingIOError, если данные необходимо записать в сырой поток, но он не может принять все данные без блокировки.Вызывающий код может освободить или изменить b после возврата из этого метода, поэтому реализация должна обращаться к b только во время вызова метода.
-
Сырой файловый ввод-вывод¶Raw File I/O
-
class
io.FileIO(name, mode='r', closefd=True, opener=None)¶ FileIOпредставляет собой файл на уровне операционной системы, содержащий данные в байтах. Он реализует интерфейсRawIOBase(а следовательно, и интерфейсIOBase).Параметр name может быть одним из двух:
строкой или объектом
bytes, представляющим путь к файлу, который будет открыт. В этом случае closefd должен бытьTrue(по умолчанию), иначе будет возбуждена ошибка.целым числом, представляющим номер существующего файлового дескриптора уровня ОС, к которому результирующий объект
FileIOпредоставит доступ. Когда объект FileIO будет закрыт, этот fd также будет закрыт, если только closefd не установлен вFalse.
Параметр mode может быть
'r','w','x'или'a'для чтения (по умолчанию), записи, исключительного создания или добавления. Файл будет создан, если он не существует при открытии для записи или добавления; он будет усечён при открытии для записи.FileExistsErrorбудет возбуждено, если он уже существует при открытии для создания. Открытие файла для создания подразумевает запись, поэтому этот режим ведёт себя аналогично'w'. Добавьте'+'к режиму, чтобы разрешить одновременное чтение и запись.Методы
read()(при вызове с положительным аргументом),readinto()иwrite()этого класса будут выполнять только один системный вызов.Можно использовать пользовательский открыватель, передав вызываемый объект как opener. Нижележащий файловый дескриптор для объекта файла затем получается вызовом opener с (name, flags). opener должен вернуть открытый файловый дескриптор (передача
os.openв качестве opener приводит к функциональности, аналогичной передачеNone).Созданный файл является ненаследуемым.
Смотрите встроенную функцию
open()для примеров использования параметра opener.Изменено в версии 3.3: Добавлен параметр opener. Добавлен режим
'x'.Изменено в версии 3.4: Файл теперь не наследуется.
В дополнение к атрибутам и методам из
IOBaseиRawIOBase,FileIOпредоставляет следующие атрибуты данных:-
mode¶ Режим, указанный в конструкторе.
-
name¶ Имя файла. Это дескриптор файла, если имя не указано в конструкторе.
Буферизированные потоки¶Buffered Streams
Буферизированные потоки ввода-вывода предоставляют интерфейс более высокого уровня к устройству ввода-вывода, чем небуферизированный.
-
class
io.BytesIO([initial_bytes])¶ Реализация потока, использующего буфер байтов в памяти. Он наследует
BufferedIOBase. Буфер отбрасывается при вызове методаclose().Необязательный аргумент initial_bytes – это байтоподобный объект, содержащий начальные данные.
BytesIOпредоставляет или переопределяет эти методы в дополнение к методам изBufferedIOBaseиIOBase:-
getbuffer()¶ Возвращает доступное для чтения и записи представление содержимого буфера без его копирования. Изменение этого представления также прозрачно обновляет содержимое буфера:
>>> b = io.BytesIO(b"abcdef") >>> view = b.getbuffer() >>> view[2:4] = b"56" >>> b.getvalue() b'ab56ef'
Примечание
Пока существует представление, объект
BytesIOнельзя изменить в размере или закрыть.Новое в версии 3.2.
-
read1([size])¶ В
BytesIOэто то же самое, что иread().Изменено в версии 3.7: Аргумент size теперь необязателен.
-
readinto1(b)¶ В
BytesIOэто то же самое, что иreadinto().Новое в версии 3.5.
-
-
class
io.BufferedReader(raw, buffer_size=DEFAULT_BUFFER_SIZE)¶ Буфер, предоставляющий доступ более высокого уровня к читаемому последовательному объекту
RawIOBase. Он наследуетBufferedIOBase. При чтении данных из этого объекта может быть запрошен больший объём данных из нижележащего необработанного потока, который сохраняется во внутреннем буфере. Затем буферизованные данные могут быть возвращены непосредственно при последующих чтениях.Конструктор создаёт
BufferedReaderдля заданного читаемого потока raw и buffer_size. Если buffer_size не указан, используетсяDEFAULT_BUFFER_SIZE.BufferedReaderпредоставляет или переопределяет следующие методы в дополнение к методам изBufferedIOBaseиIOBase:-
peek([size])¶ Возвращает байты из потока без продвижения позиции. Для выполнения вызова производится не более одного чтения из сырого потока. Количество возвращённых байт может быть меньше или больше запрошенного.
-
read([size])¶ Читает и возвращает size байт, или, если size не задан или отрицателен, до достижения EOF или пока вызов чтения не заблокируется в неблокирующем режиме.
-
read1([size])¶ Читает и возвращает до size байт, выполняя только один вызов к сырому потоку. Если хотя бы один байт уже находится в буфере, возвращаются только буферизованные байты. В противном случае выполняется один вызов чтения сырого потока.
Изменено в версии 3.7: Аргумент size теперь необязателен.
-
-
class
io.BufferedWriter(raw, buffer_size=DEFAULT_BUFFER_SIZE)¶ Буфер, предоставляющий доступ более высокого уровня к последовательному
RawIOBaseобъекту, поддерживающему запись. Он наследуетBufferedIOBase. При записи в этот объект данные обычно помещаются во внутренний буфер. Буфер выгружается в нижележащийRawIOBaseобъект при различных условиях, включая:когда буфер становится слишком мал для всех ожидающих данных;
когда вызывается
flush();когда запрашивается
seek()(для объектовBufferedRandom);когда объект
BufferedWriterзакрывается или уничтожается.
Конструктор создает
BufferedWriterдля заданного записываемого сырого потока. Если buffer_size не указан, по умолчанию используетсяDEFAULT_BUFFER_SIZE.BufferedWriterпредоставляет или переопределяет следующие методы в дополнение к методам изBufferedIOBaseиIOBase:-
flush()¶ Принудительно передает байты, находящиеся в буфере, в сырой поток. Если сырой поток блокируется, должно быть возбуждено исключение
BlockingIOError.
-
write(b)¶ Записывает байтоподобный объект, b, и возвращает количество записанных байт. В неблокирующем режиме возбуждается
BlockingIOError, если необходимо сбросить буфер, но сырой поток блокируется.
-
class
io.BufferedRandom(raw, buffer_size=DEFAULT_BUFFER_SIZE)¶ Буферизированный интерфейс для потоков с произвольным доступом. Он наследует
BufferedReaderиBufferedWriter, а также поддерживает функционалseek()иtell().Конструктор создает читатель и писатель для сырого потока с произвольным доступом, заданного в первом аргументе. Если buffer_size опущен, по умолчанию используется
DEFAULT_BUFFER_SIZE.BufferedRandomспособен на всё то же, чтоBufferedReaderилиBufferedWriter.
-
class
io.BufferedRWPair(reader, writer, buffer_size=DEFAULT_BUFFER_SIZE)¶ Буферизованный объект ввода-вывода, объединяющий два однонаправленных
RawIOBaseобъекта (один для чтения, другой для записи) в единую двунаправленную конечную точку. НаследуетBufferedIOBase.reader и writer – это объекты
RawIOBase, которые являются читаемыми и записываемыми соответственно. Если buffer_size опущен, по умолчанию используетсяDEFAULT_BUFFER_SIZE.BufferedRWPairреализует все методыBufferedIOBase, кромеdetach(), который вызываетUnsupportedOperation.Предупреждение
BufferedRWPairне пытается синхронизировать доступ к своим базовым сырым потокам. Не следует передавать ему один и тот же объект в качестве читателя и писателя; вместо этого используйтеBufferedRandom.
Текстовый ввод-вывод¶Text I/O
-
class
io.TextIOBase¶ Базовый класс для текстовых потоков. Предоставляет символьный и построчный интерфейс для потокового ввода-вывода. Наследует
IOBase. Открытого конструктора нет.TextIOBaseпредоставляет или переопределяет следующие атрибуты данных и методы в дополнение к атрибутам и методам изIOBase:-
encoding¶ Имя кодировки, используемой для декодирования байтов потока в строки и для кодирования строк в байты.
-
errors¶ Настройка обработки ошибок декодера или кодера.
-
newlines¶ Строка, кортеж строк или
None, указывающие, какие символы новой строки были преобразованы на данный момент. В зависимости от реализации и исходных флагов конструктора это может быть недоступно.
-
buffer¶ Базовый двоичный буфер (экземпляр
BufferedIOBase), с которым работаетTextIOBase. Это не частьTextIOBaseAPI и может отсутствовать в некоторых реализациях.
-
detach()¶ Отделяет базовый двоичный буфер от
TextIOBaseи возвращает его.После отсоединения базового буфера
TextIOBaseнепригоден для использования.Некоторые реализации
TextIOBase, напримерStringIO, могут не иметь понятия базового буфера, и вызов этого метода вызоветUnsupportedOperation.Новое в версии 3.1.
-
read(size=-1)¶ Читает не более size символов из потока и возвращает их в виде
str. Если size отрицательно илиNone, читает до конца файла.
-
readline(size=-1)¶ Читает до символа новой строки или конца файла и возвращает одну
str. Если поток уже находится в конце файла, возвращается пустая строка.Если указан size, будет прочитано не более size символов.
-
seek(offset, whence=SEEK_SET)¶ Изменяет позицию в потоке на заданное значение offset. Поведение зависит от параметра whence. Значением по умолчанию для whence является
SEEK_SET.SEEK_SETили0: поиск от начала потока (по умолчанию); offset должен быть либо числом, возвращённымTextIOBase.tell(), либо нулём. Любое другое значение offset приводит к неопределённому поведению.SEEK_CURили1: «поиск» в текущую позицию; offset должен быть нулём, что является пустой операцией (все остальные значения не поддерживаются).SEEK_ENDили2: поиск в конец потока; offset должен быть нулём (все остальные значения не поддерживаются).
Возвращает новую абсолютную позицию в виде непрозрачного числа.
Новое в версии 3.1: Константы
SEEK_*.
-
tell()¶ Возвращает текущую позицию в потоке в виде непрозрачного числа. Обычно это число не соответствует количеству байт в базовом двоичном хранилище.
-
write(s)¶ Записывает строку s в поток и возвращает количество записанных символов.
-
-
class
io.TextIOWrapper(buffer, encoding=None, errors=None, newline=None, line_buffering=False, write_through=False)¶ Буферизованный текстовый поток поверх
BufferedIOBaseдвоичного потока. НаследуетTextIOBase.Параметр encoding указывает имя кодировки, в которую или из которой будет декодироваться или кодироваться поток. По умолчанию используется
locale.getpreferredencoding(False).errors – необязательная строка, которая задаёт, как обрабатывать ошибки кодирования и декодирования. Передайте
'strict', чтобы возбудить исключениеValueErrorпри ошибке кодирования (значение по умолчаниюNoneимеет тот же эффект), или'ignore', чтобы игнорировать ошибки. (Обратите внимание, что игнорирование ошибок кодирования может привести к потере данных.)'replace'приводит к вставке замещающего маркера (например,'?') в местах с некорректными данными.'backslashreplace'заменяет некорректные данные escape-последовательностью с обратной косой чертой. При записи можно использовать'xmlcharrefreplace'(замена на соответствующий XML-символьный объект) или'namereplace'(замена на escape-последовательности\N{...}). Любое другое имя обработчика ошибок, зарегистрированное с помощьюcodecs.register_error(), также допустимо.Параметр newline управляет обработкой концов строк. Он может принимать значения
None,'','\n','\r'и'\r\n'. Работает следующим образом:При чтении данных из потока, если newline равно
None, включается режим универсальных символов новой строки. Строки во входных данных могут заканчиваться на'\n','\r'или'\r\n', и они преобразуются в'\n'перед возвратом вызывающему коду. Если оно равно'', режим универсальных символов новой строки включен, но концы строк возвращаются вызывающему коду без преобразования. Если оно имеет любое другое допустимое значение, входные строки завершаются только указанной строкой, и конец строки возвращается вызывающему коду без преобразования.При записи в поток, если newline равен
None, все символы'\n'преобразуются в системный разделитель строк по умолчаниюos.linesep. Если newline равен''или'\n', преобразование не выполняется. Если newline равен любому другому допустимому значению, все символы'\n'преобразуются в заданную строку.
Если line_buffering равен
True, тоflush()подразумевается, когда вызов write содержит символ новой строки или возврата каретки.Если write_through равен
True, вызовыwrite()гарантированно не буферизируются: любые данные, записанные в объектTextIOWrapper, немедленно передаются его базовому двоичному буферу.Изменено в версии 3.3: Добавлен аргумент write_through.
Изменено в версии 3.3: Значение encoding по умолчанию теперь равно
locale.getpreferredencoding(False)вместоlocale.getpreferredencoding(). Не изменяйте временно кодировку локали с помощьюlocale.setlocale(), используйте текущую кодировку локали вместо предпочитаемой пользователем.TextIOWrapperпредоставляет следующие члены в дополнение к членамTextIOBaseи его родительских классов:-
line_buffering¶ Определяет, включена ли построчная буферизация.
-
write_through¶ Определяет, передаются ли данные записи немедленно в нижележащий двоичный буфер.
Добавлено в версии 3.7.
-
reconfigure(*[, encoding][, errors][, newline][, line_buffering][, write_through])¶ Перенастраивает этот текстовый поток, используя новые значения для encoding, errors, newline, line_buffering и write_through.
Неуказанные параметры сохраняют текущие настройки, за исключением того, что
errors='strict'используется, когда encoding указан, а errors не указан.Невозможно изменить кодировку или newline, если из потока уже были прочитаны некоторые данные. Однако изменить кодировку после записи можно.
Этот метод выполняет неявный сброс потока перед установкой новых параметров.
Добавлено в версии 3.7.
-
class
io.StringIO(initial_value='', newline='\n')¶ Поток в памяти для текстового ввода-вывода. Текстовый буфер отбрасывается при вызове метода
close().Начальное значение буфера можно задать, передав initial_value. Если включена трансляция символов новой строки, они будут кодироваться так, как если бы через
write(). Поток данных позиционируется в начало буфера.Аргумент newline работает так же, как в
TextIOWrapper. По умолчанию только символ\nсчитается концом строки, и никакого преобразования символов новой строки не выполняется. Если newline установлен вNone, символы новой строки записываются как\nна всех платформах, но при чтении по-прежнему выполняется декодирование универсальных символов новой строки.StringIOпредоставляет этот метод в дополнение к методам изTextIOBaseи его родительских классов:-
getvalue()¶ Возвращает
str, содержащий всё содержимое буфера. Символы новой строки декодируются так, как если бы это делалread(), хотя позиция потока не изменяется.
Пример использования:
import io output = io.StringIO() output.write('First line.\n') print('Second line.', file=output) # Извлечь содержимое файла – это будет # 'Первая строка. Вторая строка. ' contents = output.getvalue() # Закрыть объект и освободить буфер памяти – # .getvalue() теперь будет вызывать исключение. output.close()
-
-
class
io.IncrementalNewlineDecoder¶ Вспомогательный кодек для декодирования символов новой строки в режиме универсальных новых строк. Наследует
codecs.IncrementalDecoder.
Производительность¶Performance
В этом разделе рассматривается производительность предоставленных конкретных реализаций ввода-вывода.
Двоичный ввод-вывод¶Binary I/O
Читая и записывая только большие блоки данных, даже когда пользователь запрашивает один байт, буферизованный ввод-вывод скрывает любую неэффективность вызова и выполнения небуферизованных процедур ввода-вывода операционной системы. Выигрыш зависит от ОС и типа выполняемого ввода-вывода. Например, в некоторых современных ОС, таких как Linux, небуферизованный дисковый ввод-вывод может быть таким же быстрым, как буферизованный. Однако суть в том, что буферизованный ввод-вывод обеспечивает предсказуемую производительность независимо от платформы и нижележащего устройства. Поэтому для двоичных данных почти всегда предпочтительнее использовать буферизованный ввод-вывод, а не небуферизованный.
Текстовый ввод-вывод¶Text I/O
Текстовый ввод-вывод поверх двоичного хранилища (например, файла) значительно медленнее, чем двоичный ввод-вывод поверх того же хранилища, поскольку требует преобразований между юникодом и двоичными данными с использованием кодека символов. Это может стать заметным при обработке огромных объёмов текстовых данных, таких как большие файлы журналов. Кроме того, TextIOWrapper.tell() и TextIOWrapper.seek() оба довольно медленны из-за используемого алгоритма реконструкции.
StringIO, однако, является встроенным контейнером юникода в памяти и будет демонстрировать скорость, аналогичную BytesIO.
Многопоточность¶Multi-threading
Объекты FileIO потокобезопасны настолько, насколько потокобезопасны системные вызовы (например, read(2) в Unix), которые они обёртывают.
Двоичные буферизованные объекты (экземпляры BufferedReader, BufferedWriter, BufferedRandom и BufferedRWPair) защищают свои внутренние структуры с помощью блокировки; поэтому их можно безопасно вызывать из нескольких потоков одновременно.
Объекты TextIOWrapper не являются потокобезопасными.
Повторный вход¶Reentrancy
Двоичные буферизованные объекты (экземпляры BufferedReader, BufferedWriter, BufferedRandom и BufferedRWPair) не являются реентерабельными. Хотя в нормальных ситуациях повторные вызовы не возникают, они могут появиться при выполнении ввода-вывода в обработчике signal. Если поток пытается повторно войти в буферизованный объект, к которому он уже обращается, возбуждается RuntimeError. Обратите внимание, что это не запрещает другому потоку войти в буферизованный объект.
Сказанное выше неявно относится и к текстовым файлам, так как функция open() оборачивает буферизованный объект внутрь TextIOWrapper. Это включает стандартные потоки и, следовательно, также влияет на встроенную функцию print().