Передача данных из Clickhouse в Кафку

Question

В целях тестирования мне нужно отправить данные с Clickhouse-сервера на Kafka.Я уже пытался использовать Confluent JDBC-коннектор, но это не очень хорошо работает.

Также кажется, что Clickhouse-Kafka-Engine работает только в направлении Kafka -> Clickhouse, так что Clickhouse-сервер работаеткак потребитель.

Это удобный способ использовать Таблицу в Clickhouse в качестве производителя, или я написал своего собственного производителя?

Answer 1

Я бы предложил выгрузить такие задачи за пределы ClickHouse.Вы можете сбросить данные тестирования через clickhouse-client и передать их клиенту kafka через shell.Проверьте это https://github.com/fgeller/kt