Существует ли какая-либо платформа с открытым исходным кодом для реализации системы хранения разделов / реплик? - PullRequest
0 голосов
/ 19 марта 2019

Мне нужно реализовать распределенную систему хранения для движка реального времени. Некоторые из основных требований к системе хранения:

1) разделить данные на разные разделы

2) каждый раздел имеет реплики для отказоустойчивости и постоянства данных

3) узлы динамического масштабирования

Кажется, это общая черта для многих проектов с большими данными. Так что мне интересно, есть ли какие-либо фреймворки с открытым исходным кодом, которые могут сделать это проще? Я немного покопался, но ничего полезного не нашел. Любые предложения приветствуются.

1 Ответ

0 голосов
/ 23 марта 2019

Может быть, это очевидно, но HDFS - это то, что большинство проектов с большими данными используют под капотом, и как часть Hadoop это открытый исходный код.

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html

...