Проблема в том, что я хочу отправить Rscript в мой spark Cluster с помощью spark-submit или sparkR, и консоль показывает следующее:
Error: unexpected input in
Execution halted
Условие: у меня есть спарк-кластер, и я настроил R на каждом сервере, R-код может выполняться в rconsole, но когда я отправляю r-код, похоже, что-то не так.
Вот код
library(SparkR)
sc <- sparkR.init(master = "local")
sqlContext <- sparkRSQL.init(sc)
localDF <- data.frame(name=c("John", "Smith", "Sarah"), age=c(19, 23, 18))
df <- createDataFrame(sqlContext, localDF)
printSchema(df)
sparkR.stop()