Какова лучшая библиотека / способ индексации очень большого файла последовательности (миллионы пар ключ / значение, где каждое значение может иметь разную длину, поэтому у вас не может быть схемы произвольного доступа)?
Спасибо за ваши предложения.
Задумывались ли вы о хранении данных в HBase? Он построен для такого рода вещей.