Как напечатать имя фрейма искровых данных на консоли

Question

Я новичок в Spark.

Я хочу напечатать имя своего фрейма с данными искры на консоли спарк Например: имя моего фрейма данных в df1. если я попытаюсь напечатать его на консоли, он будет напечатан, как показано ниже: DataFrame [id: int, name: string]

Есть ли у нас какая-либо встроенная функция для печати только имени фрейма данных?

Answer 1

Вы можете получить список фреймов данных pyspark в любой данный сеанс спарк в виде списка строк. Затем вы можете распечатать их или делать с ними что угодно

from pyspark.sql import DataFrame
allDataFrames = [k for (k, v) in globals().items() if isinstance(v, DataFrame)]