Как решить «Не удается импортировать имя UNIX_TIMESTAMP» в PySpark? - PullRequest
0 голосов
/ 09 мая 2018

Версия Spark 1.3.0

Python Версия: 2.7.8

Я пытаюсь добавить модуль с именем

from pyspark.sql.functions import unix_timestamp

Однако выдает ошибку:

ImportError: cannot import name SparkSession

Как я могу решить эту проблему?

1 Ответ

0 голосов
/ 09 мая 2018

Ваша библиотека Python pyspark несовместима с используемой вами версией Spark (версия == 1.3.0), а SparkSession был представлен в 2.0.0.

Попробуйте обновить Spark до последней версии 2.3.0.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...