Как запустить Spark WebApplication на AWS EMR? - PullRequest
Новая
       6

Как запустить Spark WebApplication на AWS EMR?

0 голосов
/ 11 февраля 2020

Это веб-приложение - ZIP, а не банка. Создание сеанса Spark `

SparkSession.builder().appName("FileEventTest").master("local[*]").getOrCreate()`
I already have try this 1.->sparkSessionBuilder.master("spark://************:7077")
2.val sparkSession = sparkSessionBuilder.master("yarn")
    .config("spark.submit.deployMode", "cluster").getOrCreate() 
3.sparkSession=sparkSessionBuilder.master("yarn")
   .config("spark.submit.deployMode", "client").getOrCreate()
4.sparkSessionBuilder.master("spark://*********************.compute.amazonaws.com")
    .config("spark.submit.deployMode", "client").getOrCreate()
5.sparkSessionBuilder.master("spark://ec2-13-232-84-0.ap-south-1.compute.amazonaws.com:7077")
    .config("spark.submit.deployMode", "client").getOrCreate()
...