pyspark не может начать - PullRequest
Новая
       14

pyspark не может начать

0 голосов
/ 07 сентября 2018

У меня установлена ​​операционная система Windows 8.1. Я установил apache spark , а затем установил Java JDK . Я использую git bash в windows . У меня ниже установленного в моем .bash_profile из git bash . 

export SPARK_HOME="/c/tools/spark-2.3.1-bin-hadoop2.7" 
export PATH="$SPARK_HOME/bin:$PATH"  
export JAVA_HOME="/c/Program Files (x86)/Java/jdk1.8.0_181/"

Когда я пытаюсь позвонить pyspark , я получаю сообщение об ошибке, как указано ниже.

/ c / tools / spark-2.3.1-bin-hadoop2.7 / bin / pyspark: строка 45: python: команда не найдена Ошибка: не удалось найти или загрузить основной класс org.apache.spark.launcher.Main

Я попытался запустить spark-shell по пути "/c/tools/spark-2.3.1-bin-hadoop2.7/bin/". Все еще получаю ту же ошибку.

Пожалуйста, помогите мне настроить pyspark на моей машине.

1 Ответ

0 голосов
/ 09 сентября 2018

Я наконец смог заставить работать pyspark в Windows, выполнив шаги в блоге

http://nishutayaltech.blogspot.com/2015/04/how-to-run-apache-spark-on-windows7-in.html

Мне пришлось установить еще несколько инструментов, установить переменные среды и, наконец, заставить его работать.

...