Лучшая структура данных / база данных для хранения SET с миллиардами записей (16 байтов) с TTL - PullRequest
0 голосов
/ 26 марта 2020

мы ищем структуру данных / базу данных для хранения наборов. Наши требования:

  1. Хранение одного набора (уникальных элементов) для каждой страны (всего ~ 50 из этих наборов)
  2. Элементы имеют длину 2 (поэтому каждый 8 байт)
  3. Мы ожидаем, что миллиарды элементов в наборе
  4. Каждый элемент должен иметь TTL (исчезать через некоторое время, если мы не коснемся / не обновим его снова = перезапуск TTL)
  5. Очень быстрая запись / операции касания
  6. Полный дамп таблицы, поскольку нас интересуют все элементы, которые мы сохраняем в файле с разделением строк (один раз в неделю)

Любая рекомендация?

...