Я пытаюсь настроить контекст искры, как показано ниже.
import org.apache.spark.SparkConf;
public class Main {
public static void main(String []args){
SparkConf conf = new SparkConf();
SparkConf sparkConf = conf.setAppName("test");
}
}
Однако intelliJ выдает ошибку, указывающую, что я не могу access the scala.Clonable
в строке SparkConf sparkConf = conf.setAppName("test");
.
Я правильно сделал документ gradle, чтобы все библиотеки, которые мне нужны, были загружены в мой репозиторий, как показано ниже.
apply plugin: 'scala'
buildscript {
repositories {
mavenCentral()
}
}
repositories {
mavenLocal()
mavenCentral()
}
dependencies{
compile "org.apache.spark:spark-core_2.10:1.6.1"
}
Я с нетерпением жду вашего ответа.
Спасибо.