Я пытаюсь понять, в чем разница между запуском искрового задания в кластере N узлов с использованием resource manager и without resource manager?
resource manager
without resource manager
Пожалуйста, поделитесь
Cluster Manager отвечает за получение ресурсов в кластере и выделение их для искрового приложения. См .: Архитектура Spark из документации
Диспетчеры кластеров, на которых работает Spark, предоставляют средства для планирования работы приложений. См .: здесь
Таким образом, без какого-либо диспетчера кластера искровое задание не сможет получить ресурсы в кластере.