Обнаружена ошибка «WARN ProcfsMetricsGetter: исключение при попытке вычислить размер страницы» при запуске Spark

Question

Я установил spark и при попытке запустить его выдает ошибку: WARN ProcfsMetricsGetter: Исключение при попытке вычислить размер страницы, в результате чего отчет о показателях ProcessTree остановлен

Может ли кто-нибудь помочь мне с этим

Answer 1

У меня возникла такая же проблема, потому что путь python не был добавлен в системную среду. Я добавил это в среду, и теперь она работает отлично.

Добавление PYTHONPATH переменной среды со значением как:

%SPARK_HOME%\python;%SPARK_HOME%\python\lib\py4j-<version>-src.zip:%PYTHONPATH%

помогло решить эту проблему. Просто проверьте, какая у вас версия py4j в вашем spark/python/lib folder.