Кафка производитель и брокер компрессия - PullRequest
2 голосов
/ 04 июля 2019

Если сжатие производителя Kafka установлено (например, в gzip), а конфигурация посредника также настроена на тот же кодек, будет ли брокер повторно сжимать любые сообщения от производителя или распознает, что это тот же кодек, и пропускает, и посредник повторное сжатие?

Мне известно, что посредник может быть настроен на наследование кодека посредника с помощью параметра «производитель». Тем не менее, для нашего сценария у нас могут быть производители (вне нашего контроля), которые не могут устанавливать сжатие, поэтому мы хотели бы настроить посредника на включение сжатия по умолчанию, но для тех производителей, которые находятся под нашим контролем, мы бы предпочли использовать сжатие производителя для экономии пропускной способности сети, а также для снижения нагрузки на брокера.

...