У меня есть огромные двоичные матрицы (~ 30 Гб, 25 миллионов строк с 1k столбцами), и я хочу отображать их как черно-белое изображение. Я хочу создать разреженные матрицы из плотных матриц, чтобы уменьшить размер матриц, но я уже не могу загрузить матрицы в R: scan()
и read.table()
не могут выделить вектор такого размера или их убивают. Кто-нибудь может предоставить лучший подход, который работает с огромными файлами? Я также открыт для подходов за пределами R. Спасибо!