Лучшие практики Flink TaskManager для нескольких слотов - PullRequest
0 голосов
/ 21 марта 2019

Скажем, у одного работает кластер с параллелизмом> 1. Каков наилучший способ настройки количества слотов задач в диспетчере задач?

  • Запуск нескольких ТМ с одним слотом для задач на каждом
  • Запуск одной / нескольких ТМ с несколькими слотами для задач

Мы работаем с кластером Flink версии 1.6.3. В заметках к выпуску Flink 1.7 говорится, что «Flink теперь правильно поддерживает TaskManager с несколькими слотами». Рекомендуется ли запускать их с одним слотом в предыдущих версиях?

1 Ответ

0 голосов
/ 23 марта 2019

При использовании Flink 1.5 и 1.6, за исключением случаев, когда запущен устаревший режим (через mode: legacy), распределение TaskManager с несколькими слотами поддерживается не полностью, и рекомендуется установить taskmanager.numberOfTaskSlots: 1.Теперь, когда рефакторинг среды выполнения, известной как FLIP-6, завершен, это ограничение было снято.

...