polars.Config.set_streaming_chunk_size

classmethod Config.set_streaming_chunk_size(
    size: int | None,
) → type[Config]

Переопределяет размер блока, используемый в движке streaming.

По умолчанию размер блока определяется схемой и размером пула потоков. Для некоторых наборов данных (особенно если они содержат длинные строковые элементы) это значение может быть слишком оптимистичным и приводить к ошибкам нехватки памяти.

Параметры:

size

Количество строк в одном блоке. Каждый поток будет обрабатывать блоки такого размера.