Как read_csv точно работает в python? - PullRequest
0 голосов
/ 19 февраля 2019

Я хочу читать из CSV-файла, используя Python.Я работаю над управлением памятью, поэтому я хотел бы спросить: когда я вызываю read_csv модуля pandas в python, данные из файла загружаются в оперативную память и затем читаются, или они читаются прямо с диска?Если я захочу прочитать файл csv в чанках, будут ли данные загружаться чанком в ОЗУ?

1 Ответ

0 голосов
/ 19 февраля 2019

См. Документацию :

Также поддерживается возможность итерации или разбиения файла на куски.

и

chunksize : int, необязательный

Возвращает объект TextFileReader для итерации.См. Документацию IO Tools для получения дополнительной информации об итераторе и размере фрагмента.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...