разница между spark.executor.memoryOverhead и spark.memory.offHeap.size - PullRequest
0 голосов
/ 17 апреля 2020

Когда я ищу вне кучи в Конфигурация Spark , есть два связанных свойства (spark.executor.memoryOverhead и spark.memory.offHeap.size), я не уверен в связи между этими двумя.

Если я включу spark.memory.offHeap.enabled, будет ли spark.memory.offHeap.size частью spark.executor.memoryOverhead? или эти два типа памяти вне кучи независимы (таким образом, общая память вне кучи является суммой двух)

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...