Команда для перечисления количества картографов и редукторов в HADOOP 2.x - PullRequest
0 голосов
/ 19 февраля 2019

Существуют ли какие-либо команды hadoop / yarn для перечисления числа картографов / редукторов / слотов, используемых заданием динамически

1 Ответ

0 голосов
/ 19 февраля 2019

YARN имеет дело с контейнерами и памятью, а не с Mappers и Reducers.

Чтобы получить вашу информацию, вам, вероятно, нужен двухэтапный подход.Запустите API-приложение кластера YARN Resource Manager , чтобы получить главный URL-адрес приложения.

Затем запустите API главной информации Mapreduce Application для URL-адреса AM, чтобы получить числобеговые мапперы и редукторы.

...