Я хочу использовать фабрику данных azure для работы с кучей sql запросов. Сценарий, на который я нацелен, следующий:
- Препроцессор генерирует множество (100+) sql файлов с запросами HANA для извлечения. Их можно запустить в SAP HANA, при этом каждый результат будет сохранен. У меня есть приложение, которое делает это, и оно работает.
- Я хочу переместить это в Azure Фабрику данных, так как ему нужно go через Azure среду выполнения самостоятельной интеграции, если она запущена от Azure. Другими словами, при работе в облаке единственным вариантом является коннектор ADF SAP HANA (который поддерживает операцию копирования данных).
- В идеале я мог бы указать что-то в список из sql файлов, выполните каждый из них и сохраните результаты отдельно. Если бы я мог каким-то образом подключиться к записной книжке или настраивать действие, этого было бы достаточно. Возможно ли это?
Как лучше всего этого добиться? Думаю, я мог бы программно сгенерировать более 100 копий операций с данными, но это кажется тяжелым, и, если позже потребуются дополнительные файлы, я бы изменил определение конвейера.