Ядро состояния контекста Spark - ошибка такого метода отсутствует - PullRequest
Новая
       10

Ядро состояния контекста Spark - ошибка такого метода отсутствует

0 голосов
/ 15 апреля 2019

Пытались запустить работу в Spark 2.2.Я столкнулся с проблемой ниже.Не удалось устранить эту ошибку.Использование следующих JAR-файлов в качестве зависимости.

spark-sql_2.11-2.3.0.jar, spark-core_2.11-2.3.0.jar, spark-kvstore_2.11-2.3.0.jar, spark-hive_2.11-2.3.0.jar

Ошибка: 

> Exception in thread "main" java.lang.NoSuchMethodError:
> org.apache.spark.SparkContext.statusStore()Lorg/apache/spark/status/AppStatusStore;
>         at org.apache.spark.sql.internal.SharedState.<init>(SharedState.scala:91)
>         at org.apache.spark.sql.SparkSession$$anonfun$sharedState$1.apply(SparkSession.scala:117)
>         at org.apache.spark.sql.SparkSession$$anonfun$sharedState$1.apply(SparkSession.scala:117)
>         at scala.Option.getOrElse(Option.scala:121)
>         at org.apache.spark.sql.SparkSession.sharedState$lzycompute(SparkSession.scala:117)
>         at org.apache.spark.sql.SparkSession.sharedState(SparkSession.scala:116)
>         at org.apache.spark.sql.SparkSession.newSession(SparkSession.scala:236)
...