Предложение инструмента ETL для ввода REST и вывода ODATA (или REST) - PullRequest
1 голос
/ 22 июня 2019

У нас есть источник данных REST, и нам нужно перейти в пункт назначения ERP ODATA.

Данные являются табличными, в основном строковыми, числовыми и простыми типами.Не много данных (менее 1000 строк в день).

Нам нужен инструмент ETL со следующими функциями:

  1. Ведение журнала
  2. Командная строка дружественна
  3. Автоматическая ночная работа (запланированные запуски)
  4. Простой графический интерфейс (возможно, нам придется выполнить несколько простых преобразований или фильтрацию)
  5. Предупреждение (электронная почта) об ошибках
  6. Довольно легко выучить (у нас есть некоторые гуру NiFi, но это может быть слишком много)
  7. Нам все равно, если это не Free или Open Source, на самом деле платная поддержка лучше
  8. Не облачный сервис.Источники данных являются локальными для сети компании.Данные не могут передаваться за пределы сайта.

Поисковики Google с таким уровнем детализации не достигли такого успеха.

Ответы [ 2 ]

0 голосов
/ 01 июля 2019

Я бы посоветовал вам заглянуть в Informatica Powercenter. Это платный инструмент, и поддержка довольно хорошая.

Ведение журнала - предоставляет множество способов для регистрации процесса

Удобство командной строки - хорошие инструменты командной строки можно вызвать с помощью любых инструментов CI / CD

Автоматическая ночная работа (запланированные запуски) - Инструмент предлагает встроенный планировщик для использования и поддерживает сложные планировщики, а также с помощью командной строки

Простой графический интерфейс (нам, возможно, придется сделать несколько простых преобразований или фильтрации) - графический интерфейс довольно прост, и на youtube доступно множество обучающих программ для этого инструмента

Предупреждение (электронная почта) об ошибках - Вы можете включить ошибку электронной почты с помощью простой команды / drag-drop или использовать командную строку бэкэнда

Довольно легко выучить (у нас есть некоторые гуру NiFi, но это может быть слишком много) - это субъективно, но этот инструмент довольно прост.

Нам все равно, если это не Free или Open Source, на самом деле платная поддержка лучше - это платный инструмент

Не облачный сервис. Источники данных являются локальными для сети компании. Данные не могут отправляться за пределы сайта - лучшая часть инструмента. доступны как на локальном, так и на облачном Ваш выбор выбора.

0 голосов
/ 27 июня 2019

Я не понимаю, каков вариант использования командной строки?

Некоторые из лучших инструментов ETL:

Если у вас нет большого количества данных, некоторых инструментов CI, таких как Jenkins и TeamCity, может быть достаточно. Но вы должны написать сценарий самостоятельно

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...