Переназначение раздела Apache Kafka после полного перезапуска кластера reg

Question

У меня есть кластер Kafka из 3 узлов.Я хочу добавить еще 2 узла в кластер, чтобы сделать его кластером из 5 узлов.После добавления узлов, я сделаю полный перезапуск кластера.то есть, отключите все службы kafka & zookeeper сразу, а затем запустите все службы на 5 узлах.

Я хочу знать 1. Распределяет ли FULL CLUSTER RESTART разделы по темам равномерно по 5 узлам?Или нужно запустить инструмент переназначения разделов kafka-reassign-partitions.sh?2. Нет ли у Kafka внутреннего механизма для автоматического переназначения разделов, если только не запущен kafka-reassign-partitions.sh

Пожалуйста, уточните.Спасибо.

Answer 1

Нет, это не приведет к перебалансированию разделов между узлами. Вам нужно будет сделать это вручную. Kafka восстановит баланс потребителей , когда новый потребитель присоединится к группе потребителей, но это нечто совершенно иное.

Если вы используете полный стек Confluent, вы можете использовать инструмент confluent-rebalance для этого.