Как очистить состояние одной записной книжки, не затрагивая другую записную книжку, с помощью команды в Azure Databricks?

Question

У меня есть 3 конвейера записных книжек, работающих параллельно в одном кластере, я хочу знать, есть ли способ очистить все переменные scala и запустить DF одного ноутбука, не затрагивая другой ноутбук? Я пробовал spark.close (), но он очищает состояние двух других записных книжек. Я знаю, что отсоединение записной книжки очистит состояние, но как это сделать с помощью команд? И я также хочу знать, есть ли способы вызвать g c и очистить мусор.

Заранее спасибо.

Answer 1

Вам необходимо определить свой код внутри объекта-оболочки, чтобы, если что-то пойдет не так, вы могли повторно объявить этот объект.