То, что я хотел бы сделать, это:
- Использовать записи из темы
- считать значения для каждого окна продолжительностью 1 сек.
- определить окно, чьи записи num <4 </li>
- Отправить окончательный результат в другую тему
Я использую функцию подавления для отправки окончательного результата, но я получил такую ошибку.
09:18:07,963 ERROR org.apache.kafka.streams.processor.internals.ProcessorStateManager
- task [1_0] Failed to flush state store KSTREAM-AGGREGATE-STATE-STORE-0000000002:
java.lang.ClassCastException: org.apache.kafka.streams.kstream.Windowed cannot be cast to java.lang.String
at org.apache.kafka.common.serialization.StringSerializer.serialize(StringSerializer.java:28)
at org.apache.kafka.streams.kstream.internals.suppress.KTableSuppressProcessor.buffer(KTableSuppressProcessor.java:86)
at org.apache.kafka.streams.kstream.internals.suppress.KTableSuppressProcessor.process(KTableSuppressProcessor.java:78)
at org.apache.kafka.streams.kstream.internals.suppress.KTableSuppressProcessor.process(KTableSuppressProcessor.java:37)
at org.apache.kafka.streams.processor.internals.ProcessorNode.process(ProcessorNode.java:115)
at org.apache.kafka.streams.processor.internals.ProcessorContextImpl.forward(ProcessorContextImpl.java:146)
.....
Я думаю, мой код такой же, как пример в руководстве разработчика. В чем проблема?
Мой код здесь.
final KStream<String, String> views = builder.stream("fluent-newData");
final KTable<Windowed<String>, Long> anomalousUsers = views
.map((key, value) -> {
JSONObject message = JSONObject.fromObject(value);
String[] strArry = message.getString("detail").split(",");
return KeyValue.pair(strArry[0], value);
})
.groupByKey()
.windowedBy(TimeWindows.of(Duration.ofSeconds(1))
.grace(Duration.ofSeconds(20)))
.count()
.suppress(Suppressed.untilWindowCloses(unbounded()))
.filter((windowedUserId, count) -> count < 4);
final KStream<String, String> anomalousUsersForConsole = anomalousUsers
.toStream()
.filter((windowedUserId, count) -> count != null)
.map((windowedUserId, count) -> new KeyValue<>(windowedUserId.toString(), windowedUserId.toString() +" c:" + count.toString()));
anomalousUsersForConsole.to("demo-count-output", Produced.with(stringSerde, stringSerde));