Сколько должно быть минимального объема памяти драйвера в приложении spark? - PullRequest
0 голосов
/ 10 мая 2018

В spark doc он показывает, что память по умолчанию составляет 1 ГБ, можно установить менее 1 ГБ. Я предоставляю 634 МБ, но выдает ошибку. Приложение работает за физическим пределом.

1 Ответ

0 голосов
/ 10 мая 2018

Да, мы можем установить его ниже 1 ГБ. Я запустил свое приложение с 512 м памяти, и оно работало нормально.

Вы упомянули ошибку, потому что вашему приложению требуется больше памяти, чем было указано

Не могли бы вы поделиться полной трассировкой стека ошибки.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...