Тина: убей работу после таймаута

Question

Извините, но не могу найти нужную точку конфигурации. Я планирую приложение spark, иногда оно может завершиться неудачей через 1 час, в этом случае я хочу автоматически завершить эту задачу (потому что я уверен, что она никогда не будет выполнена, и может начаться другое планирование).

Я нашел конфигурацию тайм-аута, но, насколько я понимаю, она используется для задержки запуска рабочего процесса.

Так есть ли какое-то время жизни?

Answer 1

Узи не может завершить рабочий процесс, который был запущен. Однако вы можете убедиться, что один рабочий процесс работает одновременно, установив Concurrency = 1 в Coordinator. Также у вас может быть второй рабочий процесс Oozie, отслеживающий состояние задания Spark.

В любом случае, вам следует выяснить причину, по которой задание Spark не было успешным или заблокировано.