Как создать операцию копирования в конвейере фабрики данных Azure, как мне сопоставить лист CSV с 5 столбцами с листом CSV с 20 столбцами?

Question

Итак, у меня есть лист CSV, который я хочу скопировать в лист CSV. Выходной CSV-лист содержит все столбцы входного листа, а также несколько других столбцов. (Я буду копировать данные в данные из других входных листов позже.)

Когда я запускаю конвейер, содержащий мою операцию копирования, единственными столбцами, присутствующими в новом выходном листе, являются 5 столбцов из входного листа, я Предположим, потому что это единственные в отображении. Тем не менее, я также попытался создать 15 «дополнительных столбцов» в разделе «source» в разделе «Copy Activity» - просто пробовал такие вещи, как «test», \ «test \», test, @test, @pipeline () .DataFactory, $$ FILEPATH, et c. --- но когда я отлаживаю конвейер и go возвращаюсь к своему контейнеру и смотрю на выходной лист, там все еще присутствуют только 5 столбцов из входного листа!

Как мне получить выходной лист содержать столбцы, которых нет во входном листе? Нужно ли создавать шаблон ARM?

Я делаю это полностью через Azure Портал, кстати.

Answer 1

Это прекрасно работает на моей стороне. Есть ли различия?

Answer 2

Это будет намного проще спроектировать в потоках данных ADF, вместо этого создавая производные столбцы для добавления к вашей схеме выходного приемника