Подключение концентраторов событий к Azure Databricks - PullRequest
Новая
       17

Подключение концентраторов событий к Azure Databricks

0 голосов
/ 10 июля 2019

Я хочу добавить библиотеки в блоки данных Azure для подключения к концентраторам событий.Я буду писать блокноты на Python.Так какую библиотеку я должен добавить для подключения к Event Hubs?

В соответствии с моим поиском до сих пор я получил библиотеку искрового соединения в координатах Maven.Но я не думаю, что смогу импортировать его в python.

1 Ответ

0 голосов
/ 11 июля 2019

Интегрированная структурированная потоковая передача для концентраторов событий Azure в конечном счете выполняется на JVM, поэтому вам необходимо импортировать библиотеки из координаты Maven, указанной ниже: 

 groupId = com.microsoft.azure
  artifactId = azure-eventhubs-spark_2.11
  version = 2.3.10

Примечание: ДляПриложения Python, вам нужно добавить вышеупомянутую библиотеку и ее зависимости при развертывании приложения.

Для получения дополнительной информации, смотрите " Структурированная потоковая передача + Руководство по интеграции концентраторов событий для PySpark " и " Присоедините библиотеки к Spark Cluster".

А также, вы можете сослаться на поток SO , который решает аналогичную проблему.

Надеюсь, это поможет.

...