Преимущество создания контекста искры с использованием сеанса спарка по сравнению с новым контекстом искры - PullRequest
0 голосов
/ 21 декабря 2018

В Scala, я вижу, есть 2 способа создания контекста spark:

  1. Создание sparkContext в начале выполнения задания с использованием оператора new:

    val sparkContext: SparkContext = new SparkContext ()

  2. Создание sparkContext с использованием sparkSession:

    val sparkSession = SparkSession.builder (). getOrCreate () val sparkContext =sparkSession.sparkContext

Я вижу, в основном, разработчики используют способ сеанса спарк.Есть ли какое-то конкретное преимущество в создании контекста таким образом?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...