Azure Фабрика данных - Поток данных

Question

Мне нужно обработать минус операции в Azure Фабрика данных - потоки данных. Поддерживается ли эта функция в потоке данных или есть обходной путь для этого. Просьба предоставить входы. Я знаю, что это можно сделать с помощью действий SP или операций преобразования Databricks или другими способами, но хочу знать, можно ли это сделать с помощью потоков данных в ADF. У меня есть две таблицы, одна из которых содержит данные вчерашнего дня, а другая - данные за сегодня. В базах данных, использующих минус, я могу найти различия между двумя таблицами. Например, в таблице A запись существует как A, 123, а запись таблицы B существует как A, 456. Когда я выполняю операцию минус, она извлекает эту запись.

Answer 1

Вы можете поместить этот запрос в запрос источника в любом преобразовании источника в потоках данных ADF. Просто используйте EXCEPT вместо MINUS:

select * from dbo.ProdFromSales2, кроме select * from dbo.DimProducts

Answer 2

Вы можете использовать поток данных DerivedColumn для выполнения операции Minus между двумя таблицами.

Например, я создаю две таблицы для теста: test7 и test8:

Обзор потока данных :

Объединение настроек и предварительное отображение данных :

Параметры DerivedColumn и предварительный просмотр данных:

Настройки раковин, сопоставления:

Надеюсь, это поможет.