Правила оптимизации DAG в Spark - PullRequest
0 голосов
/ 03 октября 2019

Оптимизирует ли Spark DAG при обнаружении действия? Мне известно, что DAGScheduler конвейерно превращает в один этап. Я пытаюсь выяснить, есть ли какие-либо другие оптимизации, которые применяются к DAG. И если да, то в каких ситуациях они применяются (возможно, вы можете указать мне правила или код, где это объясняется).

...