Альтернатива ADF (AzureDataFactory) DataFlow - PullRequest
Новая
       25

Альтернатива ADF (AzureDataFactory) DataFlow

0 голосов
/ 13 июля 2020

Что может быть альтернативой ADF Dataflow.

Data Flow - это новая функция Azure Data Factory (ADF), которая позволяет пользователям разрабатывать графические логики преобразования данных c, которые могут выполняться как действия в конвейерах ADF.

Есть ли аналогичный инструмент в AWS или GCP?

1 Ответ

2 голосов
/ 14 июля 2020

Существуют инструменты, аналогичные Azure Фабрике данных, как в GCP, так и в AWS, которые предоставляют способ масштабного преобразования данных без необходимости кодирования. Вы можете разработать задание преобразования данных в конструкторе, создав серию преобразований.

Google Cloud Platform :

  • Google Cloud Data Fusion - облачный сервис интеграции данных, который помогает создавать конвейеры данных ETL / ELT и управлять ими. С графическим интерфейсом и обширной библиотекой с открытым исходным кодом предварительно настроенных коннекторов, преобразований и многого другого.

Amazon Web Services :

  • AWS Data Pipeline - фокусируется на передаче данных. поддерживает преобразования предварительной загрузки с использованием SQL команд. Вы можете создать конвейер графически через консоль, используя AWS интерфейс командной строки (CLI) с файлом определения конвейера в формате JSON, или программно с помощью вызовов API.
...