В моем приложении я отправляю работу spark через livy и возвращаю результат, каждый раз загружая...
У меня на одном сервере работает master и работник spark. У меня есть задание cron для перезапуска...