Как сохранить журналы приложений YARN в локальной файловой системе вместо HDFS? - PullRequest
0 голосов
/ 02 мая 2020

У меня yarn.log-aggregation-enable установлено значение true, что означает NodeManager, чтобы немедленно объединить все журналы контейнеров в один файл и загрузить их в HDFS в ${yarn.nodemanager.remote-app-log-dir}/${user.name}/logs/<application ID> и удалить их из каталога локальных пользовательских журналов. .

Я хотел бы некоторое время хранить эти журналы в локальной файловой системе (, а не HDFS), чтобы я мог переслать эти журналы в механизм постоянного ведения журналов, такой как ELK.

...