Я разрабатывал в Scala Spark, используя IntelliJ.Мне удалось проверить содержимое переменной в режиме отладки, установив точку останова.Вот так
Недавно я начал новый проект, используя pyspark с pycharm.Я обнаружил, что код не останавливается в точке останова в операциях Spark, как показано ниже.
И еще один вопрос - подсказка подсказки не дает правильной подсказки, например, из функции «карта».Кажется, IDE не знает, что переменная из функции "map" по-прежнему RDD
, я думаю, это связано с тем, что функция python не определяет тип возвращаемого значения.
Я чувствую этот наивный вопрос для разработчиков PySpark.Любая помощь будет отличной, спасибо!