Избегайте длительного времени сбора данных для последовательных потоков данных

Question

Я испытываю очень продолжительное время сбора данных при последовательной работе потоков (7-8 минут). У меня есть конвейер с несколькими потоками, работающими в одно и то же время интеграции с TTL = 15 минут. Насколько я понимаю, несколько потоков, выполняемых один за другим и работающих в одной и той же среде выполнения интеграции, будут вызывать только длительное время сбора данных для первого, а не для последующих потоков, но я испытываю очень спорадическое c поведение с последующими потоками, которые иногда очень быстро вращаются быстро и в другое время намного медленнее (3-8 минут). Как этого можно избежать?

Answer 1

Если вы используете последовательное выполнение операций потока данных с одним и тем же Azure IR в одной и той же фабрике данных с использованием TTL, то вы должны увидеть 1-3-минутное время запуска для каждой вычислительной среды. Если вы испытываете более длительные задержки, пожалуйста, создайте заявку на портале Azure. Убедитесь, что вы следуете методам, описанным здесь и здесь .