Является ли сжатие эффективным способом чтения множества маленьких файлов быстрее? - PullRequest
0 голосов
/ 26 июня 2018

Я работаю над приложением, в котором удобно хранить много (около 10 ^ 6-10 ^ 9) маленьких файлов (<1K-10K) на диске.Мне нужно перебрать их несколько раз для вычисления.Будет ли сжатие их в один файл поможет значительно уменьшить узкое место ввода-вывода?Я еще не измерял разные решения, но хотел бы получить подсказки о том, чего ожидать.Это приложение может легко стать связанным IO. </p>

...