Головка данных sparks vs pandas (с большими столбцами) (n) в блокноте Jupyter - PullRequest
0 голосов
/ 13 июня 2018

В наши дни данные поступают с большим количеством функций.Чтобы получить краткую сводку данных, люди загружают данные во фреймы данных и используют метод head() для их отображения.Довольно часто можно проводить эксперименты с использованием ноутбуков Jupyter (с Toree для scala).

Spark (scala) хорош для обработки большого объема данных, но его метод head() не показывает заголовки столбцов в горизонтально прокручиваемойноутбук.

Глава Pandas Dataframe Pandas Dataframe Head Глава Spark Scala Dataframe Spark Scala Dataframe Head

Я знаю, что вы можете получить заголовок столбца в кадре scala, используя.столбцы, но печать его не отображает заголовок вдоль столбцов данных, что затрудняет понимание.

1 Ответ

0 голосов
/ 13 июня 2018

Вместо df.head(20) попробуйте df.show(n=20, truncate=False).Вот подробная документация .

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...