Какой метод тома рекомендуется использовать для zookeeper и брокера для Apache kafka?

Question

Какой метод тома рекомендуется использовать для zookeeper & broker для Apache Kafka, работающего в среде kubernetes?

Я использую кластер из 3 узлов и пробовал использовать постоянный том ,но есть ли рекомендуемый метод тома Apache Kafka?

Answer 1

Вы можете использовать рулевые диаграммы для установки Apache Kafka в Kubernetes (это рекомендуемый способ Confluent).Вы можете найти графики здесь .Кроме того, в этом графике есть некоторые постоянные размеры по умолчанию для Кафки.Также Confluent рекомендует использовать Shared Storage, а не Local Storage.Вы можете найти более подробную информацию здесь и здесь .

Рекомендуемое хранилище: 4 ГБ для Zookeeper и для Kafka: r4.xlarge на AWS, n1-highmem-4на GCP, DS5v2 на Azure и 12 ядро ​​, 128 ГБ ОЗУ , 12 дисков, сервер локально .Вы можете найти больше здесь .