Azure Data Factory V2 до Azure Поток данных Oracle Набор данных на приеме Premier IR или чит-код для обхода данных непосредственно в Dataflow - PullRequest
0 голосов
/ 10 апреля 2020

Я знаю, что команда Microsoft Azure работает над новыми наборами данных, поэтому мы можем использовать их в будущем в потоке данных Azure, они отключены, но

Я хочу знать, если Можно ли каким-либо образом установить источник потока данных из действия фабрики данных напрямую, используя поиск или любое другое действие .

Я знаю, что мы можем использовать копирование, но я хочу попробовать что-то другое, я могу использовать функцию Azure, по какой-то причине я не могу использовать их.

Наш Oracle аппарат слишком медленно, поэтому копирование данных с локального компьютера oracle с использованием IR в файл Parque занимает 40 минут, затем из Parque в Azure SQL занимает 30 минут. Я пытаюсь сократить время, поэтому я подумал, что с помощью Операции поиска передают данные в качестве источника в реальном времени в поток данных , но я не могу понять это прямо сейчас. Я пойму это, но если кто-то еще сделал это, дайте мне знать. возникает одна проблема: таблица поиска не может получить более 5000 строк

Я видел это видео на YouTube https://www.youtube.com/watch?v=Sj15Yjwai1A Я хочу, чтобы что-то подобное, но в моем сценарии данные взяты из Oracle и 40 миллионов записей

, так как мой IR занимает 40 минут, чтобы скопировать данные в файл Parque вместо файла Parque, он должен отправить его в качестве источника потока данных в режиме реального времени

Спасибо

enter image description here

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...