Установка hive.metastore.warehouse.dir ('null') в значение spark.sql.warehouse.dir ('/ user / hive / warehouse') - PullRequest
0 голосов
/ 26 апреля 2019

Я использую свечи 2.2 и oozie.И у меня есть график спарк-действия в oozie через shell-скрипт, т.е. я вызываю скрипт оболочки в oozie, который содержит команду spark-submit.

Но когда я запускаю работу, она дает мне ниже INFOУтверждение: установка hive.metastore.warehouse.dir ('null') в значение spark.sql.warehouse.dir ('/user/hive/warehouse').

Теперь в качестве свойства - hive.metastore.warehouse.dir = null, моя работа не может идентифицировать таблицы и базы данных.

Как это исправить или установить это свойство.Я попытался установить свойство ниже в hive-site.xml, но все еще сталкивался с той же ошибкой

    <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/user/hive/warehouse</value>
    </property>
...