Моя компания просит проводить преобразования и создавать отчеты непосредственно из Azure DW - это кажется хорошей идеей? - PullRequest
Новая
       41

Моя компания просит проводить преобразования и создавать отчеты непосредственно из Azure DW - это кажется хорошей идеей?

1 голос
/ 09 октября 2019

Моя компания хочет ускорить процесс предоставления отчетов. Внутренне, у нас есть команда из 12 человек, работающих над построением отчетов. Компания является крупной компанией с более чем 10000 сотрудников. Нас просят работать над специальными отчетами довольно часто, но на их доставку у нас уходит в среднем 1-2 недели. Старшие должностные лица говорят, что время доставки слишком медленное. Внешняя консалтинговая фирма пришла, чтобы сделать некоторую работу по обнаружению, и они посоветовали бизнес-пользователям иметь доступ к хранилищу данных Azure, чтобы они могли напрямую создавать модели в службах аналитики Azure и Power BI.

Дизайнони предложили следующее:

  1. Загрузка данных из SAP напрямую в хранилище данных Azure.
  2. Построение наших моделей данных в DW Azure - это означает всю работу по преобразованиювыполняется непосредственно в Azure DW (подготовка, очистка, сборка по схеме Star).
  3. Создание моделей в службах аналитики Azure.
  4. Использование в Power BI.

Кажется ли это хорошей стратегией? Я новичок в хранилище данных Azure, и наш технический руководитель занимается отцовством, поэтому мы не можем попросить его о помощи.

Я спросил внешнего консультанта, как это повлияет на применение всех рабочих нагрузок преобразования к Azure DW напрямую. и он сказал, что «это mpp, поэтому обработка выполняется очень быстро».

Кто-нибудь может помочь? Технический руководитель моей команды по отцовству, поэтому мы не можем его заполучить.

1 Ответ

0 голосов
/ 09 октября 2019

Azure, безусловно, является отличной платформой для современных целей хранения и анализа данных, но ADW или нет требует дополнительного изучения. Вообще говоря, вы можете рассмотреть два варианта:

Объем невелик (<10 ТБ): </p>

  • SAP -> SSIS / ADF -> БД SQL Azure -> Службы аналитики Azure (как семантический слой) табличная модель с DAX -> Power BI

Объем огромен (> 10 ТБ):

  • SAP -> SSIS / ADF -> Azure SQL DW -> Семантический уровень Azure Analysis Services -> Power BI

Конечно, объем является лишь одним из многих факторов, которые следует учитывать при выборе архитектуры, но он является важным фактором из многочисленных реальных опытовгде MPP не может быть действительно необходимым. Фактическая архитектура и размеры требуют гораздо больше усилий для исследования. Вышеуказанные пункты являются наиболее общими для вашей справки, чтобы иметь что-то для начала и исследовать дальше.

Если вам нужны технические подробности для переноса данных SAP в Azure, вы можете просмотреть наш блог здесь http://www.aecorsoft.com/blog/2018/2/18/extract-sap-data-to-azure-data-lake-for-scale-out-analytics-in-the-cloud и здесь http://www.aecorsoft.com/blog/2018/4/26/use-azure-data-factory-to-bring-sap-data-to-azure.

...