Как получить ненулевые отсортированные восходящие данные из Spark DataFrame?

Question

Я загружаю данные во фреймы данных, где один из столбцов равен zipCode (String type). Интересно, как получить ненулевые значения для этого столбца в порядке возрастания в Scala?Большое спасибо заранее.

Answer 1

scala> val df = Seq("2", "1", null).toDF("x")
df: org.apache.spark.sql.DataFrame = [x: string]

scala> df.orderBy($"x".asc_nulls_last).show
+----+
|   x|
+----+
|   1|
|   2|
|null|
+----+