Spark отправить в Azure Data Factory - PullRequest
0 голосов
/ 07 апреля 2020

Как интегрировать JAR-сервер scala в фабрику данных Azure? У меня есть существующий Spark Jar, построенный с Scala, и мне нужно вызвать его из ADF - Spark Activity.

1 Ответ

0 голосов
/ 15 апреля 2020

Примечание: В Azure фабрике данных entryFile должен быть либо Python, либо файлом jar , вам необходимо скомпилировать Scala Исходный код для JAR-файла перед запуском его в качестве приложений Spark.

enter image description here

Ссылка: https://docs.microsoft.com/en-us/azure/data-factory/transform-data-using-spark

...