Объединить два кадра данных в Spark 1.5

Question

У меня есть два кадра данных в Scala (изначально в виде списков), и я хочу добавить их.Например, если бы у меня было: val df1 = List(1, 2, 3) и val df2 = List(4, 5, 6)

, я бы хотел получить кадр данных с двумя строками

---

1 2 3

4 5 6

Я где-то обнаружил, что если бы я преобразовал эти списки в фактические кадры данных и сделал что-то вроде val df = df1.union(df2), я бы получил то, что мне нужно, но, к сожалению, в Spark 1.5

это не работает

Answer 1

В вашем примере, df1 и df2 - это не кадры данных, а списки.Предполагая, что они действительно являются фреймами данных, вы можете сделать:

val df3 = df1.unionAll(df2)