Я попытался подключиться к главному узлу EMR с помощью SSH и на основе идентификатора приложения. Я хочу проанализировать проблемы, но у меня нет знаний о командах YARN, поэтому где я могу получить или найти команды YARN и т. Д .?
На самом деле вам не нужно знать какие-либо команды пряжи, так как журналы представляют собой обычные текстовые файлы (иногда архивируются). Большинство из них расположены в /mnt/var/log/.Например, файлы журналов шагов выполнения находятся здесь: /mnt/var/log/hadoop/steps/.
/mnt/var/log/
/mnt/var/log/hadoop/steps/
Если вы хотите найти журналы исполнителей, то вам следует ssh обратиться к основным узлам и искать журналы приложений в разделе /mnt/var/log/application/.
/mnt/var/log/application/
Кроме того, EMR по умолчанию настроен на архивирование файлов журнала на Amazon S3