Мы могли бы использовать некоторую справку о том, как отправлять журналы Spark Driver и рабочих в место назначения вне блоков данных Azure, например, например, хранилище BLOB-объектов Azure или поиск Elastic с использованием Eleastic-beats.
При настройке нового кластератолько опции get get log log: dbfs, см.
https://docs.azuredatabricks.net/user-guide/clusters/log-delivery.html.
Любые пожелания приветствуются, спасибо!