Как включить поддержку улья для искры в ноутбуке?

Question

По умолчанию я получаю предопределенный объект сеанса искры (spark).Который не улей включен.Как я могу получить улей с включенной свечой зажигания?

Answer 1

Я знаю, что опаздываю на ваш вопрос.Но я надеюсь, что это будет полезно для тех, кто работает над этим.

Если в файле spark-defaults не установлено свойство catalogImplemenetation, значением по умолчанию в Toree SQL будет локальный каталог мета-хранилища (Derby).,Вам необходимо явно установить для этой конфигурации значение Hive в файле spark-defaults.conf в кластере, например:

set spark.sql.catalogImplementation=hive

Перезапустите ядро ​​после сохранения изменений в этом файле.