Pyspark. Похоже, что вы пытаетесь сослаться на SparkContext из широковещательной переменной, действия или преобразования. Ошибка при использовании Spark Session - PullRequest
0 голосов
/ 20 января 2020

Следующее - моя реализация. Я пытаюсь преобразовать данные из СДР в кадр данных, получаю следующую ошибку.

Похоже, что вы пытаетесь сослаться на SparkContext из широковещательной переменной action, action, или преобразование.

Следуя моей реализации. Теперь я прочитал, что спарк-контекст работает на рабочих, но я не могу заставить его работать и с спаркс-сессией.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...