Я пытаюсь написать описание для таблицы, которую создаю в таблицах данных. Это описание будет использовано для создания словаря данных с полями, относящимися к нашей организации.
Я попытался добавить описание в качестве опции при создании таблицы с помощью saveAsTable или spark.catalog.createTable
Здесь я пытаюсь задать описание с помощью saveAsTable:
Здесь я пытаюсь установить описание через spark.catalog.createTable:
Оба случая возвращают description=None при просмотре метаданных метастаза:
Любые идеи о том, была ли реализована эта функция, или как ее использовать.