У меня есть проблема, когда YARN очень медленно выделяет ресурсы для спарка, иногда уже поздно добавлять исполнителя. Это началось после отключения, после перезапуска кластера он начал работать медленно, хотя я перезагружал его несколько раз. Никаких настроек не было. Раньше все работало нормально.
На рисунке выше видно, что исполнитель был добавлен очень поздно. Иногда некоторые исполнители не были добавлены вообще. Снимок ниже, сделанный до отключения света.
Кто-нибудь может понять, что происходит? это все еще работает, но намного медленнее, чем раньше.