Искра на пряже - выгрузка контейнера AM против выгрузки контейнера не AM - PullRequest
0 голосов
/ 23 октября 2018

Когда я запускаю Spark на Yarn, я понимаю, что задания могут превышать свою квоту ресурсов в тихое время, но могут быть вытеснены, когда другим пользователям требуется их квота.

Это кажется справедливым, однако иногда я вижу, что квота AM былавыгрузка, приводящая к перезапуску всего моего приложения и потере часов работы.

Это кажется несправедливым!Может ли кто-нибудь объяснить условия выгрузки контейнера AM и как это предотвратить?Я бы предпочел, чтобы мое приложение какое-то время простаивало, чем перезагружалось.

...