Для чего нужна кафка коннект Json Schema? - PullRequest
0 голосов
/ 06 июля 2019

Интересно, какая выгода от добавления схемы json к вашему сообщению, поскольку kafka connect ее поддерживает?

1 Ответ

1 голос
/ 06 июля 2019

Схемы являются важной частью конвейеров данных.Kafka Connect поддерживает встраивание его в JSON, или вы можете использовать другой вариант (Avro, Protobuf).Если у вас нет схемы, вы усложняете жизнь потребителям данных, и некоторые будут настаивать на этом - например, для коннектора JDBC Sink требуется схема и произойдет сбой, если ее нет 'т.

Итак, чтобы ответить на ваш вопрос, если вы не хотите использовать Avro или Protobuf (и если вам нравятся большие сообщения с большим количеством избыточных повторяющихся данных ;-), тогда вы можете использовать формат схемы Kafka Connect JSON.

...