Я новичок в изучении sparkSQL и пытаюсь запустить примеры, представленные в документе spark, но получаю сообщение об ошибке:
введите описание изображения здесь
моя программа такая:
введите описание изображения здесь
что мне делать.
примечание: я использую IDEA для редактирования моей программы
весь код:
import org.apache.spark.{SparkConf, SparkContext}
import org.apache.spark.sql.{Row, SQLContext, SparkSession}
import org.apache.spark.sql.types._
object SqlTest1 {
case class Person(name: String, age:Long)
def main(args: Array[String]): Unit = {
val spark = SparkSession
.builder()
.getOrCreate()
import spark.implicits._
runBasicDataFrameExample(spark)
}
private def runBasicDataFrameExample(spark: SparkSession)={
val df = spark.read.json("resorces/people.json")
df.show()
}
}