Почему from_json завершается с ошибкой «not found: value from_json»? (2)

Question

Уже прочитали ответ на этот вопрос , который находится на SO. Ни одно из этих исправлений не является моей проблемой.

Я не могу вызвать функцию "from_json".

У меня уже было ниже в моем коде:

import org.apache.spark.sql.functions._

Я также попытался добавить:

import org.apache.spark.sql.Column

Я запускаю Scala / Spark через Eclipse. Scala Версия 2.11.11, Spark Версия 2.0.0.

Есть идеи?

Answer 1

from_json функция недоступна в Spark 2.0

Доступен с Spark 2.1

Примечания к выпуску из spark 2.1 упоминает о добавлении from_json функциональности