Выделить Select (). Количество () является фреймом данных pyspark?

Question

Я видел

df.select(“name”).distinct().count() <br/>

это фрейм данных pyspark?или фрейм данных панд?

Answer 1

count () - это действие в искре, поэтому вы получите счетчик фрейма данных искры.

К вашему сведению, выберите и различите преобразования, которые вернут вам фрейм данных.Поскольку искра следует за ленивым вычислением, вычисление (в большинстве случаев) в искре не происходит, пока вы не вызовете действие.