Вы можете использовать Debezium для потоковой передачи записей CDC из баз данных в кластер Kafka, да.
Вот пример с другой управляемой службой Kafka, Confluent Cloud.
Главное - правильно настроить параметры безопасности, а также указать соответствующие database.history.consumer
и database.history.producer
конфигурация.