Задание Spark Streaming завершается неудачно ровно через 7 дней в HD Insights без журналов ошибок

Question

Единственные журналы ошибок, которые мы получаем, это: Приложение application_1575912755011_0035 не удалось 5 раз из-за ApplicationMaster для тайм-аута попытки appattempt_1575912755011_0035_000005. Сбой приложения.

Каковы причины этого? Какое разрешение?

Answer 1

Проверьте, не связано ли это с: в) или запустив Spark Streaming как: https://docs.qubole.com/en/latest/user-guide/data-engineering/quest/quest-intro.html

лучший, мой sh