Как преобразовать столбцы Hive в типы pyspark sql - PullRequest
0 голосов
/ 31 января 2020

Я нахожусь в процессе написания универсальной c утилиты, которая выполняет "des c отформатированную для любой таблицы улья", чтобы получить имена и типы столбцов, и я хочу преобразовать типы в эквивалентные типы pyspark sql ( int в IntegerType, bigint в long et c). Существуют ли какие-либо API-интерфейсы, которые могут возвращать эквивалентный тип pyspark для типа данных куста?

...