Нужно ли форматировать датодель для файловой системы HDFS или нам нужно только отформатировать наменоде - PullRequest
0 голосов
/ 14 января 2019

При настройке псевдо или полного кластера, нам нужно отформатировать узел данных для установки файловой системы HDFS или нам нужно только отформатировать namenode.

Я спрашиваю об этом, потому что я читал об этом во многих блогах о том, что HDFS хранит данные в последовательном порядке на жестком диске, и это абстрактный слой, который хранит данные в больших блоках, а не в хранилище по умолчанию для размера файла при условии, что файл хоста система.

Если мы не форматируем датодет, то мощная функция HDFS приходит в упадок.

1 Ответ

0 голосов
/ 14 января 2019

Форматирование и монтирование жестких дисков не имеет прямого отношения к форматированию HDFS. Концептуально идея «формирования» одинакова. Но эти две задачи полностью отделены друг от друга и не связаны напрямую.

Команда hadoop format не форматирует и не монтирует жесткие диски. Жесткие диски уже должны быть отформатированы и смонтированы. Когда вы запускаете команду форматирования для HDFS, он подготавливает файл fsimage NameNode, чтобы он знал, где все блоки хранения находятся на дисках с данными.

...