Почему папка spark .sparkStaging находится в папке hdfs при запуске spark на пряжу на локальной машине? - PullRequest
0 голосов
/ 16 октября 2018

Я пытаюсь выяснить, почему моя папка spark .sparkStaging по умолчанию находится в / user / name / folder в моих локальных hdf-файлах?Я никогда не устанавливал рабочий каталог для spark вообще.Следовательно, почему и как я могу получить этот набор с hdfs?какая конфигурация устанавливает для этого значение по умолчанию.Я проверил в среде искры во вкладке пользовательского интерфейса и конфигурации пряжи, и я не вижу ничего, что устанавливает это.Может ли кто-нибудь дать мне подсказку на это?

...