Кафка в режиме реального времени потоковое против микро сервисов

Question

Существует ли минимальная скорость сообщения в Гбит / с, необходимая для выбора Kafka для потоковой передачи в реальном времени?

Можем ли мы обрабатывать действительно низкую скорость передачи сообщений в Kafka?

Answer 1

Мой источник производит примерно 4000–5000 сообщений в день, и Кафка, способная обрабатывать огромный объем данных с высокой пропускной способностью, сможет ли он обрабатывать такой низкий объем, а частота сообщений также будет низкой?

Да.И «Да» не только для Kafka «Core» (брокеры = хранилище, публикация / подписка), но и «Да» для:

• Производителей Kafka и клиентов-потребителей (писать сообщения и читать сообщения соответственно)
• Kafka Connect (для интеграции Kafka с другими системами, такими как MySQL, Elastisearch, S3)
• Kafka Streams (для написания приложений обработки в Java / Scala)
• KSQL (для обработки записиприложения в потоковом SQL)