У меня есть пара проблем с запуском PySpark в Spyder, и у меня закончилась Google.
Проблема 1: Код выглядит следующим образом:
import pyspark
from pyspark import SparkContext
sc = SparkContext()
Ошибка: «Исключение: Java Процесс шлюза завершился перед отправкой номера своего порта» (JAVA_VERSION = "1.8.0_251")
Ошибка № 2 (на основе кода в другом вопросе здесь):
from os import environ
print(environ['SPARK_HOME'])
print(environ['JAVA_HOME'])
try:
print(environ['PYSPARK_SUBMIT_ARGS'])
except:
print("no problem with PYSPARK_SUBMIT_ARGS")
KeyError: 'SPARK_HOME' (и имеют аналогичную ошибку для JAVA_HOME).
У меня есть оба этих набора в моих переменных окружения.
Кто-нибудь может мне здесь помочь? До сих пор я любил Spyder в моем коротком Python обучении, но я в тупике.