почему не могу запустить pyspark в ноутбуке Jupyter, Mac OS

Question

Я скачал apache pyspark через brew download, а также попытался загрузить напрямую с https://spark.apache.org/. Но после загрузки я попытался набрать "pyspark" прямо в терминале и противостоять этим ошибкам. введите описание изображения здесь

Я также перепробовал все шаги, доступные в этом руководстве: https://medium.com/@GalarnykMichael/install-spark-on-mac-pyspark-453f395f240b. Но также получаю сообщение об ошибке при запуске искры в ноутбуке Jupyter, а именно:

введите описание изображения здесь

Answer 1

на вашем скриншоте ошибка в строке 14, вы не импортировали sparksession. Sparksession - не функция pyspark.

Добавьте: из pyspark.sql импортируйте SparkSession в ваш код, это может дать другим в соответствии с вашим сценарием, но это исправит. Пожалуйста, поделитесь своим сценарием.