Использование sparkSession в отчете набора данных NullPointException - PullRequest
0 голосов
/ 20 июня 2019

Когда я перебираю набор данных, я хочу иметь возможность использовать sparkSession для запуска некоторого sql, но он сообщает о проблеме

val session = SparkSession
  .builder()
  .master("local")
  .appName("Spark Hive Example")
  .config("spark.sql.warehouse.dir", warehouseLocation)
  .enableHiveSupport()
  .getOrCreate()

import session.implicits._

session.sql("use test")
val dataFrame = session.sql("select * from t1")
dataFrame.map(row=>{
  // session.sql("select * from tab2").show()
  //how can i run it here?
  // it report a NullPointException
}).show()

, кто может мне помочь, спасибо!

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...