Мы пытаемся использовать Hive LLAP, чтобы обеспечить ответ в течение секунды для примерно 400 ГБ данных. Даже когда кеш полностью прогрелся (отсутствует кеш 0), мы не можем перейти к секундам выполнения, поскольку само время компиляции запроса занимает около секунды.
Так выглядит сводка. Время «Выполнить DAG» мало, но время перед собой близко к 1 секунде. Есть ли способ сократить время компиляции и запуска DAG-запроса?
Сводка выполнения запроса
ПРОДОЛЖИТЕЛЬНОСТЬ РАБОТЫ
Составление запроса 0,14 с
Подготовка плана 0,14 s
Получить координатор запросов (AM) 0,00 с
План отправки 0,05 с
Запуск DAG 0,55 с
Запуск DAG 0,97 с