Можно ли настроить хранилище данных clickhouse на hdfs? - PullRequest
0 голосов
/ 20 октября 2018

В настоящее время clickhouse хранит данные по

/ var / lib / clickhouse

пути, и я прочитал, что не поддерживает глубокое хранение.Кстати, есть ли у него какие-либо конфиги для настройки hdfs в файле config.xml?

1 Ответ

0 голосов
/ 24 октября 2018

хранение данных в домене clickhouse в HDFS - это действительно ПЛОХАЯ идея;)

, поскольку HDFS не совместима с posix, файловая система, clickhouse будет работать крайне медленно в этом варианте развертывания

, который вы можете использовать https://github.com/jaykelin/clickhouse-hdfs-loader для загрузки данных из HDFS в clickhouse, и в ближайшем будущем https://clickhouse.yandex/docs/en/roadmap/ clickhouse может поддерживать формат PARQUET для загрузки данных

clickhouse имеет собственное решение для высокой доступности и кластеризации, пожалуйста, прочитайте https://clickhouse.yandex/docs/en/operations/table_engines/replication/ и https://clickhouse.yandex/docs/en/operations/table_engines/distributed/

...