Запуск на том же хосте на одном узле кластера Hadoop EMR:
Это прекрасно работает через zeppelin
%spark.r
df <- as.DataFrame(faithful)
head(df)
Мне нужно использовать livy, но после короткого периода зависания я получаю
%livy.sparkr
df <- as.DataFrame(faithful)
head(df)
[1] «Ошибка в getSparkSession (): SparkSession не инициализирован»
перезапускается как
%livy.sparkr
sparkR.session()
df <- as.DataFrame(faithful)
head(df)
Я получил пакет Spark, найденный в SPARK_HOME: / usr /lib / spark [1] "Ошибка в sparkR.sparkContext (master, appName, sparkHome, sparkConfigMap,: секрет аутентификации не предоставлен в среде."
Не уверен, как заставить livy.sparkr работать