Параметризация с использованием Azure Data Factory

Question

У меня есть конвейерное задание в Azure фабрике данных, которое я хочу использовать для запуска конвейерного задания, но, например, передаю все файлы в течение определенного c месяца.

У меня есть папка с именем 2020/01, внутри которой находятся многочисленные файлы с разными именами.

Вопрос: можно ли передать параметр, чтобы только извлечь и загрузить файлы для 2020 / 01.01 и 2020/01/02, если это имеет смысл?

Answer 1

Отлично, спасибо, Джей, это сработало, и теперь я могу выполнять свои конвейерные задания, проходя через уровень месяца или даже дня.

Очень ценю ваш ответ, фантазирую c день.

С уважением

Райно

Answer 2

Вопрос: можно ли передать параметр, чтобы извлечь и загрузить файлы только для 2020/01/01 и 2020/01/02, если это имеет смысл?

Вы не упомянул, какой соединитель вы используете в конвейерном задании, но вы упомянули folder в своем вопросе. Как я знаю, путь к основной папке может быть параметризацией в конфигурации действий копирования ADF.

Вы можете создать параметр:

Затем примените его в wildcard folder path:

Даже если имена ваших файлов имеют одинаковый префикс, вы можете применить 01*.json к wildcard file name property.