Добавление KafkaConnect к существующим сервисам Ambari - PullRequest
0 голосов
/ 28 мая 2018

У меня есть настройка кластера, которой управляет Ambari, однако я хотел бы добавить докер KafkaConnect и использовать Kafka и ZooKeeper, который уже настроен через Ambari.Я могу только найти образы докера, которые развертывают kafka-connect с zookeper и kafka, однако они мне не нужны на докере.

Что мне нужно искать, чтобы найти образ докера, который позволил бы мне использовать существующие службы kafka и zookeeper?

1 Ответ

0 голосов
/ 29 мая 2018

Если предположить, что Kafka 0.10 установлен Ambari (как это сделано Hortonworks HDP или HDF), то Kafka Connect уже включен в установку Kafka.

В настоящее время Ambari не предлагает какого-либо механизма для управления образами / сервисами Docker.или API-интерфейсы Kafka Connect.

Flume, Spark и Nifi являются поддерживаемыми, управляемыми Ambari способами Hortonworks для передачи данных Kafka в Hadoop.

Если вам нужен пользовательский интерфейс Kafka Connect, вы можете выбрать Landoop (бесплатно) или Confluent Control Center (лицензирован)

Вы можете независимо использовать такие сервисы, как Docker Swarm + Portainer, например, для управленияУслуги Docker на многих машинах

...