Невозможно установить Python 3 как версию по умолчанию для Apache spark в MacOS

Question

Я пытался сохранить Python 3 как версию по умолчанию для Spark в моем Macbook, но он не настраивается.Я не могу запустить свои программы также из-за этого.

Это ошибка, которую я получаю в Pycharm

"Исключение: Python в работнике имеет версию 2.7, отличную от той, что в драйвере 3.7, PySpark не может работать с другими второстепенными версиями. Пожалуйста, проверьте переменные среды PYSPARK_PYTHONи PYSPARK_DRIVER_PYTHON установлены правильно.

Можете ли вы помочь мне в этом?

Answer 1

Просто установите переменную окружения:

export PYSPARK_PYTHON=python3

, если вы хотите, чтобы это было постоянное изменение, добавьте эту строку в скрипт pyspark.Если python3 недоступен, вам нужно вместо него указать путь к нему.