В spark dataframe, почему нам нужно сначала преобразовать dataframe в rdd, чтобы вычислить количество разделов. Разве dataFrames не разделены? и если кадры данных разделены, то как правильно определить количество разделов данных.
df.rdd.getNumPartitions ()