Как смоделировать данные для cassandra при использовании коннектора spark cassandra при тестировании потоковой искры? - PullRequest
0 голосов
/ 07 января 2019

У меня есть код, написанный полностью на scala, который использует потоковую передачу по искру для получения данных json из темы kafka, а затем после некоторой обработки выдает их в cassandra и другую тему kafka. Теперь мне нужно написать модульный тест для этого кода. Мне нужна помощь о том, как написать такой тест и как мы можем имитировать данные, когда я использую разъем искровой кассандры.

1 Ответ

0 голосов
/ 07 января 2019

Вы можете использовать встроенный в искровую кассандру разъем , который разработан вместе с самим разъемом. Просто добавьте зависимость Maven или SBT в ваш проект, например, это для SBT:

"com.datastax.spark"  %% "spark-cassandra-connector-embedded" % {latest.version}
...