У меня yarn.log-aggregation-enable
установлено значение true
, что означает NodeManager
, чтобы немедленно объединить все журналы контейнеров в один файл и загрузить их в HDFS
в ${yarn.nodemanager.remote-app-log-dir}/${user.name}/logs/<application ID>
и удалить их из каталога локальных пользовательских журналов. .
Я хотел бы некоторое время хранить эти журналы в локальной файловой системе (, а не HDFS
), чтобы я мог переслать эти журналы в механизм постоянного ведения журналов, такой как ELK.