spark SQL - чтение spark.read.option дд-ммм-гггг из csv в dataFrame - PullRequest
Новая
       9

spark SQL - чтение spark.read.option дд-ммм-гггг из csv в dataFrame

1 голос
/ 01 марта 2020

У меня есть файл CSV со столбцом строки dd-MMM-yyyy (например, 03-APR-2019), который я хочу прочитать в формате даты.

мой код для чтения, как показано ниже: 

 spark.read
      .option("header", "true")
      .option("inferSchema", "true")
      .option("quote", "\"")
      .option("escape", "\"")
      .option("multiLine", "true")
      .option("dateFormat", "dd-MMM-yyyy")
      .csv(csvInPath)

Однако после того, как мой код прочитал файл CSV, дата все еще отображается как строка в моем фрейме данных.

кто-нибудь может посоветовать? спасибо

...