Я пишу утилиту для переноса существующих данных Oracle Prod в cassandra для конкретного модуля проекта.
Для этого я использую spark-sql, соединитель dasastax cassandra, apache cassandra.
Я выполняю следующую процедуру:
- чтение таблицы из оракула и получение фрейма данных.
- этот фрейм данных я глотаю в таблицу cassandra.
Я использую spark-sql v2.3.1, т.е. я использую spark.read.format("jdbc")... для чтения данных.и dataframe.write.option("datastax.cassandra").... и т. д.
Мне нужно использовать этот инструмент для миграции рабочей БД.Вы видите что-то не так в этом дизайне?Нужно ли мне позаботиться о чем-то еще?Пожалуйста, предложите мне дизайн ...