Я являюсь частью проекта, который разрабатывает приложение на основе CQRS. Приложение получит все свои данные из хранилища № SQL, где оно получит их в денормализованном формате. Однако фактические данные находятся в реляционной системе. Хранилище № SQL служит для просмотра реляционных данных. Это представление должно обновляться через регулярные промежутки времени (вероятно, каждые несколько минут).
Я не уверен, какую технологию следует использовать для автоматизации этой процедуры обновления. Денормализованное представление - JSON, которое может быть сгенерировано в запросе SQL, но из-за этого поставщик базы данных процедуры обновления определит c, что станет проблемой. Я пытался использовать Pentaho Kettle, но создание действительно денормализованной структуры оказалось невероятно утомительным и отнимало много времени.
Какая технология уместна, учитывая, что она должна легко обслуживаться и адаптироваться?
Я являюсь рассматривая возможность написания Python скриптов, но я не уверен, насколько они будут обслуживаемы.
Хранилище No SQL - это Couchbase, а СУРБД, используемая для разработки, - MariaDB.