Как получить процессор, память и ввод-вывод для конкретного запроса улья?

Question

Журналы кустов содержат информацию об общем времени, затраченном запросом, количестве извлеченных строк и т. Д., А также о внутренних вызовах методов.

Есть ли способ получить использование процессора, ввода-вывода и памяти дляконкретный запрос улья?

Answer 1

[UPDATE]

Если вы хотите проверить использование процессора и памяти для конкретного запроса, то вы можете использовать подход на основе куста JMX , чтобы собрать некоторые из этих деталей, например:

https://community.hortonworks.com/articles/62211/enabling-jmx-monitoring-for-hiveserver2.html

Если вы используете Ambari HDP , то вы также можете использовать услуги Grafana . Графана также может предоставить множество графиков , связанных с Hive:

https://docs.hortonworks.com/HDPDocuments/Ambari-2.5.2.0/bk_ambari-operations/content/llap_overview.html

https://docs.hortonworks.com/HDPDocuments/Ambari-2.5.2.0/bk_ambari-operations/content/grafana_hive_hiveserver2.html

Если вы хотите узнать загрузку ЦП по Databas e, вы можете перейти по этой ссылке:

Загрузка ЦП базой данных?

[Предыдущий ответ]

Вы можете использовать ip-addr: 8088 (например: 192.168.118.111:8088), и там вы можете проверить, сколько контейнеров было создано и сколько процессорной памяти + памяти потребовалось для выполнения задания успешно.