Будет ли удержание Кафки также разделять реплики?

Question

В процессе оценки потребностей в хранилище для кластера kafka с 3 узлами, когда мы определяем срок хранения 3 дня на topi c с 1 разделом, имеющим 3 реплики, при условии, что для потоковой передачи 1 ГБ / день потребуется 1 ГБ x 3 реплики и хранение в течение 3 дней 9 ГБ для 3 брокеров ... или он будет хранить только 1 раздел данных в течение 3 дней ie 3 ГБ в целом для всех брокеров?

Answer 1

Реплики предназначены для каждого сообщения, поэтому, если у вас есть 1 ГБ сообщений, попадающих на один раздел топи c с replication.factor=3, то это составляет в общей сложности 3 ГБ

Примечание. Существуют внутренние темы как и _consumer_offsets, что также должно учитываться (коэффициент его сохранения и репликации).