Power BI и Spark в Azure HDInsight: ошибка юпитера - PullRequest
Новая
       18

Power BI и Spark в Azure HDInsight: ошибка юпитера

0 голосов
/ 27 октября 2018

В настоящее время я изучаю PowerBI и использую это руководство о том, как подключиться к Spark в HDInsight http://radacad.com/power-bi-and-spark-on-azure-hdinsight-step-by-step-guide#comment-87691

Каждый раз, когда я запускаю следующий скрипт, я получаю следующую ошибку 

"from pyspark import SparkContext
from pyspark.sql import *
from pyspark.sql import HiveContext
from pyspark.sql import Row
# Create Spark and Hive contexts
sc = SparkContext('yarn-client')
hiveCtx = HiveContext(sc)

бросает 

Cannot run multiple SparkContexts at once; existing SparkContext(app=remotesparkmagics, master=yarn) created by __init__ at /mnt/resource/hadoop/yarn/local/usercache/livy/appcache/application_1540610068228_0022/container_1540610068228_0022_01_000001/tmp/5339487565003813329:595 
Traceback (most recent call last):
  File "/usr/hdp/current/spark2-client/python/pyspark/context.py", line 116, in __init__
    SparkContext._ensure_initialized(self, gateway=gateway, conf=conf)
  File "/usr/hdp/current/spark2-client/python/pyspark/context.py", line 318, in _ensure_initialized
    callsite.function, callsite.file, callsite.linenum))
ValueError: Cannot run multiple SparkContexts at once; existing SparkContext(app=remotesparkmagics, master=yarn) created by __init__ at /mnt/resource/hadoop/yarn/local/usercache/livy/appcache/application_1540610068228_0022/container_1540610068228_0022_01_000001/tmp/5339487565003813329:595

Как это исправить?

Спасибо ** strongd

...