Пример данных
У меня есть набор данных, который выглядит ниже и представлен в текстовом формате:
KK111,2568,79463,6434,Y
BB222,9464,67543,6868,N
Мне нужно прочитать его и дать явную схему, используя Spark 1.6 с Scala sqlcontext.Приведенный ниже код только для чтения значений первого столбца:
val df = sqlContext.read
.format("com.databricks.spark.csv")
.option("header", "false")
.option("inferSchema", "false")
.load("data.txt")