невозможно отобразить фрейм данных с помощью .show () в pyspark

Question

следующий код:

from pyspark import *
from pyspark.sql import *

spark=SparkContext()

sc=SQLContext(spark)

valuesA = [('Pirate',1),('Monkey',2),('Ninja',3),('Spaghetti',4)]

TableA = sc.createDataFrame(valuesA,['name','id'])

valuesB = [('Rutabaga',1),('Pirate',2),('Ninja',3),('Darth Vader',4)]

TableB = sc.createDataFrame(valuesB,['name','id'])

TableA.describe('name').show()

Ошибка следующим образом:

---------------------------------------------------------------------------
Py4JJavaError Traceback (most recent call last)
<ipython-input-11-dcdbe2628b72> in <module>
1 TableA.describe('name').show()

Answer 1

Пожалуйста, попробуйте использовать функцию описать так:

TableA.describe(['name']).show()