Доступ к режиму искрового кластера в представлении искры

Question

Я пытаюсь запустить мой код spark scala, используя spark submit.Я хочу получить доступ к искровому кластеру для этой цели.Итак, что я должен использовать для мастера в контексте Spark?Я использовал, как это

val spark = SparkSession.builder()
      .master("spark://prod5:7077")
      .appName("MyApp")
      .getOrCreate;

Но, похоже, не работает.Что я должен использовать в качестве мастера для использования искрового кластера?

Answer 1

Из официальной документации -

spark-submit --class <main-class>  --master <master-url> --deploy-mode <deploy-mode>  --conf <key>=<value> ... # other options <application-jar>  [application-arguments]

Answer 2

Если вы пытаетесь отправить свою работу в IDE, просто убедитесь, что «prod5» является главным, и попробуйте изменить порт на 6066 по умолчанию.