Итак, у меня есть «большое» количество «очень больших» ASCII-файлов числовых данных (всего гигабайт), и моя программа должна будет последовательно обрабатывать их полностью хотя бы один раз.
Какой-нибудь совет по хранению / загрузке данных? Я думал о преобразовании файлов в двоичный файл, чтобы сделать их меньше и быстрее загружать.
Должен ли я загрузить все в память одновременно?
Если нет, то является ли открытие хорошим способом частичной загрузки данных?
Какие советы по эффективности, связанные с Java?