Как указать имя очереди для активности HDInsight в конвейере ADFv1? - PullRequest
0 голосов
/ 23 апреля 2019

Наш кластер HDInsight имеет очередь по умолчанию. Мы ежедневно замечаем, что один запрос пытается доминировать над всем кластером во время его выполнения. Таким образом, в любой момент времени всегда есть какой-то запрос, занимающий большую долю ресурсов кластера - даже до 90%. Таким образом, на данный момент существует только очередь по умолчанию и очередь JobLuncher - никаких пользовательских методов, таких как определение дополнительных очередей. Тип планировщика - это планировщик емкости, который используется по умолчанию. Это ванильное HDInsight, все варианты по умолчанию. Итак, если у вас есть несколько очередей, как определить конкретную очередь в HDInsight в ADFv1? Есть ли такой шаблон JSON, доступный в качестве примера? По сути, я должен иметь возможность указать имя очереди, в которую должен быть отправлен конкретный сценарий в действии. До сих пор я не видел такой опции в ADFv1, поэтому все идет в очередь по умолчанию.

...