Несколько проблем с запуском PySpark и работой на Spyder - PullRequest
0 голосов
/ 16 апреля 2020

У меня есть пара проблем с запуском PySpark в Spyder, и у меня закончилась Google.

Проблема 1: Код выглядит следующим образом:

    import pyspark
    from pyspark import SparkContext
    sc = SparkContext()

Ошибка: «Исключение: Java Процесс шлюза завершился перед отправкой номера своего порта» (JAVA_VERSION = "1.8.0_251")

Ошибка № 2 (на основе кода в другом вопросе здесь):

    from os import environ
    print(environ['SPARK_HOME'])
    print(environ['JAVA_HOME'])
    try:
        print(environ['PYSPARK_SUBMIT_ARGS'])
    except:
        print("no problem with PYSPARK_SUBMIT_ARGS")  

KeyError: 'SPARK_HOME' (и имеют аналогичную ошибку для JAVA_HOME).

У меня есть оба этих набора в моих переменных окружения.

Кто-нибудь может мне здесь помочь? До сих пор я любил Spyder в моем коротком Python обучении, но я в тупике.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...