как закрыть улей клиента - PullRequest
0 голосов
/ 24 декабря 2018

драйвер потоковой передачи искры OOM.Искреннее потоковое чтение метастафа куста HiveExternalCatalog, затем анализ использования памяти jmap, отображение матов:

17 instances of "org.apache.spark.sql.hive.client.IsolatedClientLoader$$anon$1", loaded by "sun.misc.Launcher$AppClassLoader @ 0xe0013a28" occupy 11,312,784 (10.23%) bytes. These instances are referenced from one instance of "java.lang.ThreadLocal$ThreadLocalMap$Entry[]", loaded by "<system class loader>"

Я не могу найти функцию закрытия в HiveExternalCatalog / IsolatedClientLoader / HiveClientImpl.Как закрыть клиентское соединение метастазу куста?

...