Почему, когда Maven Build работает хорошо, но добавление Spark Jar в качестве внешнего Jars приводит к ошибке компиляции «объект Apache не является членом пакета org»

Question

На Eclipse, при настройке spark, даже после добавления внешних jar-файлов для построения пути к spark-2.4.3-bin-hadoop2.7/jars/<_all.jar>, Complier жалуется на '“object apache is not a member of package org''

Да, построение зависимостей через Maven или SBT исправит это.

Но Вопрос здесь звучит так: ПОЧЕМУ задается вопрос *1005* скалярная компиляция выдает "объект apache не является членом пакета org"традиционный путь терпит неудачу, как это?

Answer 1

Если мы рассмотрим здесь, Совместимость с версией Scala / Spark Мы могли увидеть похожую проблему.Проблема в Scala НЕ обратно совместима .Следовательно, каждый модуль Spark соответствует определенной библиотеке Scala.Но когда мы запускаем из eclipse, среда Scala затмения может быть несовместима с той конкретной версией scala, для которой у нас настроены библиотеки Spark.