Spark Dataframe сохранить как CSV - PullRequest
       1

Spark Dataframe сохранить как CSV

0 голосов
/ 27 сентября 2019
ID,Score1,Score2,Total Score
user021,4/4,2/2,14.0/50.0

Приведенный выше CSV, созданный с использованием искрового фрейма данных.

df.coalesce(1).write
      .mode("overwrite")
      .format("com.databricks.spark.csv")
      .option("header", "true")
      .save(url)

Когда мы открываем этот CSV в листе Excel для столбцов Score1 и Score2 преобразуются в Формат даты .

Существуют ли какие-либо конфигурации для хранения обоих столбцов Score1 и Score2 в виде строки вместо даты?1017 *

Вещи, которые я пытался, но не повезло!

 df.coalesce(1).write
      .mode("overwrite")
      .format("com.databricks.spark.csv")
      .option("header", "true")
      .option("inferSchema", "false/true")
      .save(url)

Я пытался с inferSchema конфигурацией, но не повезло в этом.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...