Как исправить ошибку «неожиданно в», которая появляется при отправке задачи R с помощью spark-submit - PullRequest
0 голосов
/ 16 апреля 2019

Проблема в том, что я хочу отправить Rscript в мой spark Cluster с помощью spark-submit или sparkR, и консоль показывает следующее:

Error: unexpected input in
Execution halted

Условие: у меня есть спарк-кластер, и я настроил R на каждом сервере, R-код может выполняться в rconsole, но когда я отправляю r-код, похоже, что-то не так.

Вот код

library(SparkR)  
sc <- sparkR.init(master = "local")  
sqlContext <- sparkRSQL.init(sc)
localDF <- data.frame(name=c("John", "Smith", "Sarah"), age=c(19, 23, 18))  
df <- createDataFrame(sqlContext, localDF)    
printSchema(df)   
sparkR.stop()
...