java .lang.NoSuchMethodError: 'boolean scala .util.Properties $ .coloredOutputEnabled ()' в spark.read.csv - PullRequest
0 голосов
/ 27 января 2020

Я хочу просто прочитать csv в фрейм данных spark, но происходит странная ошибка.

import org.apache.spark.sql.SparkSession

object Main extends Serializable {

  def main(args: Array[String]): Unit = {

    val title = "Advance Analitycs with Spark 02";
    val pathIn: String = "block_1.csv"
    val pathOut: String = "out-02-00"

    val spark = SparkSession.builder
      .master("local")
      .appName(title)
      .getOrCreate()

    val csv = spark.read.csv(pathIn)
  }
}

java .lang.NoSuchMethodError: 'boolean scala .util.Properties $ .coloredOutputEnabled () '

Есть идеи?

Это хранилище со всем проектом: https://github.com/woblak/training/tree/master/spark/spark-dataframe-start

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...