Самый быстрый способ записать фрейм данных с миллионами строк в csv - PullRequest
1 голос
/ 13 июля 2020

У меня есть фрейм данных с ~ 7 миллионами строк и 18 столбцами.

Какая самая быстрая библиотека, которая потребляет меньше времени?

Прямо сейчас я пишу фрейм данных, используя:

df.to_csv('file.csv', header=True, index=False)

И это у меня занимает ~ 3 часа.

Размер файла ~ 800 МБ.

Есть ли более быстрый метод / библиотека для ускорения процесса записи?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...