Kafka JDBC разъем приемника: воссоздал все остальные разъемы при создании или обновлении одного разъема - PullRequest
0 голосов
/ 12 июня 2019

У меня около 500 разъемов, и каждый раз, когда я создаю новый, мне приходится долго ждать, чтобы воссоздать предыдущий.Это слишком медленный процесс

1 Ответ

0 голосов
/ 12 июня 2019

Перебалансировка "Останови мир" - известная проблема с Kafka Connect. Хорошей новостью является то, что в KIP-415 , который должен появиться в Apache Kafka 2.3, появилась новая функция постепенного ребалансирования, которая должна сделать вещи намного лучше.

В то же время единственный другой вариант - это разделить работников Kafka Connect и создать отдельные кластеры, разделив на них 500 разъемов (например, по функции, типу или другому произвольному фактору).

...