Как преобразовать сообщение JSON, полученное Azure EventHub, в файл Avro в хранилище озера данных Azure Gen2? - PullRequest
0 голосов
/ 28 мая 2019

Я новичок в платформе Azure и в настоящее время изучаю способы ведения дел.Мой вариант использования выглядит обычным, но я не смог найти в Интернете никакой информации, которая бы мне помогла.

Рабочий процесс:

  • Событие JSON отправляется из внешней системы в Azure EventHubгруппа потребителей.
  • Событие затем преобразуется в файл Avro путем добавления некоторой информации о схеме.
  • Отформатированный файл хранится в хранилище озера данных Azure Gen2.

Как лучше всего достичь этого результата?

Что я пробовал:

  • EventHub Capture не работает с хранилищем озера данных Azure Gen2, только Gen1, в любом случае это не таккажется, что возможно присоединить схему Avro к событию.
  • Stream Analytics не разрешает вывод Gen2, и если используется хранилище BLOB-объектов, существующий контейнер не найден, и создание не удается, если я его укажу.Еще раз кажется невозможным присоединить схему при выборе выходного формата Avro.
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...