Внутренние органы исполнителей в Spark? - PullRequest
0 голосов
/ 04 июля 2019

У меня установлена ​​система зажигания поверх моей HDFS. Допустим, у меня есть файл (содержит 3 блока, размер блока 128 МБ, общий размер файла: 384 МБ), и каждый блок доступен на 3 разных узлах. Что произойдет, если я запущу приложение spark, используя 1 исполнителя Будут ли все 3 блока сначала перенесены на тот узел, где выполняется исполнитель, а затем начнется обработка?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...