У меня довольно сложный формат, который, кажется, не хочет преобразовывать правильно. Это всегда получается как ноль. Я использую форматирование SimpleDateFormat, чтобы попытаться это сделать.
Dataset<Row> test = spark.sql("select to_date('Fri Apr 05 08:49:57 CEST 2019', 'EEE MMM dd HH:mm:ss CEST yyyy')" );