Azure перекрестное соединение потока данных

Question

У меня есть одно требование, которое мне нужно выполнить с потоком данных Azure.

введите описание изображения здесь

Как вы можете видеть в выводе, что мы можем легко использовать функцию скрещивания и разделения в запросе sql, но то же самое можно сделать, используя поток данных.

Answer 1

Вы можете сделать это в потоках данных ADF.

1. Из вашего источника плоских файлов добавьте производный столбец
2. Создайте новый столбец под названием «страны». Мы возьмем ваш многозначный столбец и разберем его в этом массиве, используя следующее выражение: split (country, ',')
3. Используйте Flatten для денормализации в вывод, который вы запрашивали для
4. Свести: установите разворачивание в страны (я назвал это myarray на скриншоте) и выньте оригинальное поле, разделенное запятыми, из ваших сопоставлений полей.