Как извлечь имя и тип из org. apache .spark. sql .Column?

Question

Как мне получить имя и тип из org. apache .spark. sql .Column? Полей для этого нет вообще.

Answer 1

Есть несколько вариантов, я обычно запрашиваю схему:

val c: Column = ??? // e.g. df("id")

val dataType = df.select(c).schema.head.dataType.simpleString
val name = df.select(c).schema.head.name

, но вы также можете попробовать исследовать базовое выражение (для этого должен быть разрешен атрибут)

val simpleString = c.expr.simpleString) // gives name and type
val dataType = c.expr.dataType.simpleString) 

Answer 2

Я бы попробовал df.printSchema (). Следует напечатать имя столбца вместе с его типами.

df относится к имени кадра данных.