У меня есть один огромный набор данных комментариев Reddit в виде файла .csv на моей виртуальной машине Ubuntu Cloud.Код, который мне нужно запустить, чтобы сгенерировать данные обучения и тестирования для чат-бота, предназначен для файла .db.
Как преобразовать этот файл .csv в файл .db, не считывая все это в оперативную память, такую как SQLiteделает?
Файл имеет размер около 100 ГБ и находится на виртуальной машине Ubuntu 18.04 LTS Google Cloud Compute Engine.