Как найти приложения hadoop под управлением oozie (hadoop) - PullRequest
0 голосов
/ 24 декабря 2018

Мы знаем, что сначала oozie запускает задание hadoop и, используя это задание, запускает другие приложения hadoop.Поэтому я хочу найти список тех приложений hadoop (например, application_231232133), запущенных заданием oozie (hadoop).В настоящее время нет такого API или команды.

Ответы [ 2 ]

0 голосов
/ 10 апреля 2019

Вы можете использовать Oozie REST API http://oozie.apache.org/docs/4.2.0/WebServicesAPI.html#Job_Information, который возвращает атрибут externalId для каждого действия, заполненного идентификатором приложения hadoop.

0 голосов
/ 30 декабря 2018

Если вы используете Oozie 5.0 или выше, тогда тип приложений этих заданий - «Oozie Launcher», а не «MapReduce», поэтому их легко отфильтровать.

...