Flink контрольная точка на hdfs конфигурации HA namenode - PullRequest
0 голосов
/ 07 января 2019

Путь контрольной точки flink - это абсолютный путь hdfs, такой как hdfs://address:port/path, но когда hdfs находится в режиме HA, как установить конфигурацию flink для изменения URL-адреса namenode hdfs?

1 Ответ

0 голосов
/ 07 января 2019

При использовании Hadoop HA рекомендуется clusterId. После этого URI выглядит следующим образом: hdfs: //nameservice_id/path/file.Use этот URI вместо 'hdfs: //activeNamenodeHost/path'.Надеюсь, это поможет.

Как установить здесь: NameNode HA при использовании hdfs: // URI .

Подробнее здесь: https://hadoop.apache.org/docs/r2.7.0/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...