Как перезапустить искровое задание, когда оно завершается неудачно с ненулевым состоянием выхода - PullRequest
0 голосов
/ 18 июня 2019

Я пытаюсь выяснить, как перезапустить задание запуска, когда оно завершается неудачно с ненулевым состоянием выхода, таким как исключение подключения к базе данных или любое другое исключение времени выполнения.Из документации apache-spark я понял, что есть параметр конфигурации -

spark.driver.supervise:true

Но в документации упоминается, что этот параметр работает только в автономном режиме Spark или в режиме развертывания кластера Mesos.Как получить аналогичную настройку в искровом кластере на основе ярнаЯ не смог найти соответствующую документацию на страницах Apache YARN.

...