Подключите Jupyter к Улей Метастор - PullRequest
0 голосов
/ 29 апреля 2019

Я использую ноутбук Jupyter на докере В моей папке spark conf (/ usr / local / spark / conf) у меня есть hive-site.xml

<configuration>
  <property>
    <name>hive.metastore.uris</name>
    <value>thrift://metastore-uri:9083</value>
  </property>
</configuration

когда я использую ноутбук R, следующий код работает нормально и подключается к удаленному хранилищу метастазов улья

library(SparkR)
as <- sparkR.session("local[*]")
sql("show tables")

но когда я запускаю в записной книжке Scala следующий код

val sqlContext = new org.apache.spark.sql.SQLContext(sc);    
sqlContext.sql("show tables").show

запускается локально в метастазах и не показывает данных

любой совет?

...