Команда Pyspark не распознана (Ubuntu) - PullRequest
0 голосов
/ 15 октября 2019

Я успешно установил pyspark, используя anaconda, и настроил пути в файле .bashrc. После ввода команды pyspark, она открывает Jupyter-notebook, в котором код python работает правильно. Например, print "Hello" и т. Д.

Но когда я выполняю такие команды Pyspark, как collect(), take(5) и т. Д., Выдается ошибка, что "Cannot run program '/usr/bin/Python-3.7.4". Permission denied.

Это неверный каталог,Python-3.7.4 устанавливается в каталог Anaconda.

Есть ли какая-либо конфигурация / шаг, который мне нужно выполнить для решения этой проблемы?

1 Ответ

0 голосов
/ 15 октября 2019

Попробуйте обновить PYSPARK_PYTHON и PYSPARK_DRIVER_PYTHON переменные среды до правильного пути распространения Python 3

...