Как отобразить конкретную строку max в фреймах данных pyspark

Question

У меня есть следующий код

ageDF.sort('Period')
     .groupBy('Period')
     .agg(round(sum('Age_specific_birth_rate'), 2).alias('Total Births'))
     .show()

Выше сгруппированы сумму age_specific_birth_rate по периоду

Таким образом, результат будет выглядеть как

Period|Total Births|
+------+------------+
|  2000|       395.5|
|  2001|       393.4|
|  2002|       377.3|
|  2003|       386.2|
|  2004|       395.9|
|  2005|       391.9|
|  2006|       400.4|
|  2007|       434.0|
|  2008|       437.8|
|  2009|       425.7|
|  2010|       434.0|
|  2011|       417.8|
|  2012|       418.2|
|  2013|       400.4|
|  2014|       384.3|
|  2015|       398.7|
|  2016|       374.8|
|  2017|       362.7|
|  2018|       342.2|

Но я хочуотобразить максимальное значение для этого периода

, поэтому, когда я набираю следующий код

  ageDF.sort('Period')
       .groupBy('Period')
       .agg(round(sum('Age_specific_birth_rate'), 2).alias('Total'))
       .select('Period', 'Total')
       .agg(max('Total'))
       .show()

, я получаю вывод

> +----------+
  |max(Total)|
  +----------+
  |     437.8| 
  +----------+

Но я хочу получить что-то вроде

  +------+------------+
  |Period|max(Total)  |
  +------+------------+
  |  2008|       395.5|

Что мне делать?

Спасибо

Answer 1

Вы можете попробовать

ageDF.sort('Period')
     .groupBy('Period')
     .agg(round(sum('Age_specific_birth_rate'), 2).alias('Total'))
     .orderBy(functions.col('Total').desc())
     .limit(1)
     .select('Period', 'Total')
     .show()