Я использую maven и scala для создания приложения spark, которое должно подключаться к кластеру на azure блоках данных. Как я могу указать моей свече подключиться к кластеру databricks?
Я видел databricks-connect , но он загружает некоторые jar-файлы, используя sbt. Я не понимаю, как именно достигается такое подключение.
Мой вариант использования требует программного запуска задания спуска в кластере БД по запросу, поэтому мне нужно иметь возможность подключить его там.