Юлия: Загрузка файла RDS с использованием RData.jl занимает огромный объем памяти - PullRequest
1 голос
/ 29 марта 2019

Я загружаю RDS-файл в Julia с

using RData
objs = load(rds, convert=true)

Исходный rds-файл составляет ~ 3 ГБ.Когда я запускаю функцию load, объем памяти увеличивается до ~ 40 ГБ.

Есть идеи, что происходит?

1 Ответ

1 голос
/ 29 марта 2019

Файлы rds фактически сжимаются с помощью gzip.Попробуйте разархивировать файл и посмотрите, насколько он велик (для Windows вы можете использовать 7-zip для этого).Уровень сжатия для фрейма данных может составлять около 80-90%, поэтому ваши цифры выглядят хорошо.

...