Опции, когда данные не помещаются в память в R - PullRequest
0 голосов
/ 01 декабря 2018

У меня есть 10 CSV-файлов, каждый размером 2 ГБ.Я знаю, если я объединю файлы, будет 48 миллионов строк, потому что я сам сделал запрос в sql.Мой компьютер имеет 16 ГБ оперативной памяти.Каковы мои варианты работы с этими файлами в R?Я понимаю, что могу использовать sparkr или sparlyr, но я все еще пытаюсь понять технологию.Есть ли другие варианты?

...