Pyspark Подсчитайте количество строк появления - PullRequest
0 голосов
/ 13 октября 2019

Я новичок в pyspark. Я хочу найти номер строки «NA» для каждого столбца. Код ниже имеет проблему. Я хочу посчитать строку с помощью «NA», но приведенный ниже код также будет считать «NAN», «NANN». Есть ли способ изменить значение на точно равное?

names = weatherData.schema.names
for name in names:
    print(name + ': ' + str(weatherData.where(df[name].has("NA")).count()))
...