Как создать пустой фрейм данных, используя внешнюю таблицу улья? - PullRequest
1 голос
/ 15 октября 2019

Я использую приведенное ниже, чтобы создать фрейм данных (spark scala) с использованием внешней таблицы улья. Но датафрейм также загружает данные в него. Мне нужен пустой DF, созданный с использованием схемы внешней таблицы улья. Для этого я использую spark scala.

val table1 = sqlContext.table("db.table")

Как создать пустой кадр данных, используя внешнюю таблицу улья?

1 Ответ

2 голосов
/ 15 октября 2019

Вы можете просто сделать:

val table1 = sqlContext.table("db.table").limit(0)

Это даст вам пустой df только со схемой. Из-за ленивых вычислений это также не займет больше времени, чем просто загрузка схемы.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...