Кафка общение с помощью клоудера

Question

On-прем ---> HAProxy (AWS) ---> Кафка (AWS). Мы можем разрешить внешнее общение, используя свойство advertised.listerers, и мы можем использовать слушателей для внутреннего общения. Если мы включаем обе настройки, связь не происходит должным образом. Мы используем 0.10.2 в качестве версии Kafka.

Я полагаю, что у нас есть некоторые настройки, которые нужно выполнить через zookeeper, чтобы контролировать взаимодействие с брокером. Как мы можем сделать это с помощью Cloudera?

Answer 1

См. https://rmoff.net/2018/08/02/kafka-listeners-explained/. Вам необходимо настроить двух прослушивателей, один для внешнего IP-адреса, через который подключаются ваши клиенты, другой для внутренней сети AWS, через которую ваши брокеры будут связываться друг с другом.