Я использую pycharm в качестве IDE для разработки pyspark. Я добавил библиотеку pyspark в качестве содержимого root в свой проект в pycharm. Но все же он не показывает различные методы, которые можно применить при нажатии (ctrl + space)
, например, в приведенном ниже коде чтение вернет объект DataFrameReader. Pycharm предоставляет методы, применимые к sparkSession. Однако после прочтения я не получаю никаких предложений о методах, применимых к DataFrameReader, таких как option, format, parquet et c.
sparkSession.read.option("header", "true").csv("sample.csv")
Нужно ли мне делать какие-то дополнительные настройки в pycharm или есть какие-либо другие лучший редактор для разработки pyspark?