Я настроил рабочий процесс для выполнения задания на искру. Кажется, что рабочий процесс при запуске с обычным сценарием работает нормально, а приложение Spark работает отлично, когда выполняется отдельно.
Но, когда рабочий процесс Oozie настроен на выполнение искрового задания, я получаю следующую ошибку
18/05/09 17:38:40 ERROR ApplicationMaster: User class threw exception: java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object;)Lscala/runtime/ObjectRef;
java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object;)Lscala/runtime/ObjectRef;
Я использую Spark версии 2.1.0 и Scala 2.11.8, но все еще сталкиваюсь с проблемой.
Дайте мне знать, если я что-то упустил