Подтверждение из облачного потока данных или Apache Beam в поток Kinesis - PullRequest
0 голосов
/ 05 сентября 2018

Как отправить подтверждение в поток данных Amazon Kinesis (Kinesis) после обработки данных, поступающих из Kinesis?

Например, эти данные должны быть записаны в хранилище, базу данных или даже в другую очередь сообщений. Теперь подтверждение немедленно отправляется в Kinesis, но может случиться так, что хранение данных в системе хранения или базе данных пошло не так, или во время обработки произойдет сбой Cloud Dataflow или Apache Beam. Это означает, что существует потенциальная потеря данных, потому что событие из Kinesis затем после восстановления уже прочитано и, следовательно, потеряно.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...