Как установить spark в rstudio, не работает spark_connect () - PullRequest
Новая
       40

Как установить spark в rstudio, не работает spark_connect ()

0 голосов
/ 12 мая 2018

Я установил R-3.4.0 и rstduio-сервер 1.1.447 в centOS.В rstudio я не могу подключить искру следующим образом: enter image description here

 sc <- spark_connect(master = "local")
  Error in validate_java_version(master, spark_home) : 
  Java is required to connect to Spark. Please download and install Java from https://www.java.com/en/

enter image description here В нем сказано, что Java требуется для подключения к Spark.но я установил JDK1.8: 

$ java -version
java version "1.8.0_111"
$ echo $JAVA_HOME
/usr/java/jdk1.8.0_111

enter image description here Я не знаю, как подключить искру.Я думаю, если я должен установить искру в Rstudio?Искра установлена ​​в кластере CDH, версия 2.1.0.cloudera1.я добавляю "SPARK_HOME = / opt / cloudera / parcels / SPARK2" в файл Renviron.

Ответы [ 2 ]

0 голосов
/ 14 мая 2018

теперь подключи!Я использую команду "Sys.setenv (JAVA_HOME =" ")".

0 голосов
/ 12 мая 2018

Если вы установили JDK после установки R и запуска RStudio, возможно, вам придется перенастроить R: 

R CMD javareconf

и перезапустить сервер: 

rstudio-server restart

, оба выполняются с rootпривилегии.

...