Запуск pyspark в (Anaconda - Spyder) в ОС Windows

Question

Уважаемые, я использую Windows 10, и я знаком с тестированием моего кода Python в Spyder.однако, когда я пытаюсь написать команду «pyspark», Spyder показывает «Нет модуля с именем« pyspark »» Pyspark установлен на моем ПК, и я также могу выполнить импорт pyspark в командной строке без каких-либо ошибок. Я нашел много блогов, объясняющих, каксделать это в Ubuntu, но я не нашел, как решить это в Windows.

Answer 1

Хорошо для использования пакетов в Spyder, вы должны установить их через Anaconda.Вы можете открыть «подсказку анаконды» и записать код:

conda install pyshark

, который даст вам пакет, доступный в SPYDER.

Answer 2

Привет, я установил Pyspark в Windows 10 несколько недель назад.Позвольте мне рассказать вам, как я это сделал.Я следовал "https://changhsinlee.com/install-pyspark-windows-jupyter/".

Так что, точно следуя каждому шагу, вы можете запускать pyspark, используя либо командную строку, либо сохраняя файл python и работая.

Когда вы запускаете через ноутбук(загрузите Anaconda). Запустите оболочку anacoda и введите pyspark. Теперь вам не нужно делать «omport pyspark». Запустите вашу программу без этого, и все будет в порядке. Вы также можете сделать spark-submit, но для этого я понял, чтовам нужно удалить PYSPARK_DRIVER_PATH и OPTS PATH в переменной среды.