Обновляет ли kylin агрегаты в объединенных таблицах? - PullRequest
0 голосов
/ 12 октября 2019

У нас есть 3 таблицы, которые обновляются ежедневно. В одном из запросов эти 3 таблицы объединяются, и в последней объединенной таблице есть столбец отметки времени. Финальная объединенная таблица используется для вычисления различных агрегатов. Этот запрос выполняется каждый день, и, следовательно, ежедневное объединение выполняется для целых данных (не инкрементных данных) и вычисляются агрегаты.

Вопрос: можно ли это оптимизировать с помощью Kylin или Druid или любым другим методом? Поскольку 3 таблицы обновляются ежедневно, в идеале только эта часть (инкрементная) должна быть разумным образом соединена с остальными данными, а агрегаты должны вычисляться / обновляться инкрементно. Я считаю, что это также ускорит производительность.

...