Как долго сеанс livy поддерживается в памяти головного узла?

Question

Как только работа отправляется в livy, она создает для нее сеанс.Затем отправьте искру, отправьте задание на пряжу и пряжу, затем выполните задание.До какого момента сеанс сохраняется в памяти?До подачи в пряжу или до ее завершения пряжей?

Answer 1

В основном это зависит от настроек, которые вы передали.

неактивный сеанс будет остановлен после livy.server.session.timeout

см. Эти свойства для установки в livy.conf

# Enabled to check whether timeout Livy sessions should be stopped.
# livy.server.session.timeout-check = true

# Time in milliseconds on how long Livy will wait before timing out an idle session.
# livy.server.session.timeout = 1h
#
# How long a finished session state should be kept in LivyServer for query.
# livy.server.session.state-retain.sec = 600s