Датафрейм не отображается в формате, а только в Google Colab - PullRequest
Новая
       42

Датафрейм не отображается в формате, а только в Google Colab

0 голосов
/ 31 мая 2019

Это может быть глупый вопрос, но я недавно начал использовать Google Colab, и когда я пытаюсь распечатать Dataframe, он показывает атрибуты, но без столбцов (Excel, как формат) 

finance = rawdata = spark.read.format("csv").load('part-00000-eb231ee1-14b7-4608-a881-10d3b44c8b34-c000 (1).csv', header="true", inferSchema=True)
finance.createOrReplaceTempView("finance_data")
df1 = spark.sql(""" select
                adset_id, ad_id
                from finance_data
                """)
df1

Теперь код вышедолжен показывать вывод как Excel, но вместо этого он показывает: 

DataFrame[adset_id: bigint, ad_id: bigint]

Я думал, что строк нет, поэтому я сделал df1.head (), и это привело к: 

Row(adset_id=23843670425060130, ad_id=23843670425390130)

Так что есть хотя бы одна строка, верно?

Я также пытался print(df1), но получил тот же ответ.

Я предполагаю, что могут быть некоторые настройки, такие как ps.display_rows или max_height или что-то.Я просто не могу получить определенную ссылку.

...