Отображение на основе правил для действия копирования в Azure фабрике данных

Question

Я пытаюсь создать динамическое отображение c, когда использую операцию копирования данных на Azure фабрике данных. Я хочу создать файл паркета, который содержит те же данные, которые я читаю из источника, но я хочу изменить имена некоторых столбцов, чтобы удалить пробелы в нем ( Это ошибка формата паркета ), и я хочу сделать это автоматически.

Я видел, что это возможно при отображении потока данных , но я не вижу никаких таких функций в операции копирования (отображение потока данных ограничено Несколько разъемов в качестве источника, поэтому я не могу его использовать).

Как вы можете видеть на изображении, кажется, что я могу изменять только отдельные столбцы, а не некоторые из них, которые удовлетворяют определенным условиям

Как я могу это сделать?

Заранее спасибо

Answer 1

Операция копирования может меняться с одного типа файла на другой, например, csv на json, паркет в базу данных, но по своей сути она не допускает никаких преобразований, таких как изменение содержимого любых столбцов, даже добавление дополнительных столбцов.

В качестве альтернативы рассмотрите возможность использования ADF для вызова записной книжки Databricks для этих сложных преобразований на основе правил.