В Apache spark, как Apache ignite развертывает себя на всех рабочих узлах с включенным динамическим исполнителем в spark - PullRequest
1 голос
/ 23 октября 2019

Я просмотрел код для IgniteContext, с режимом как deploy ignite на всех узлах исполнителя, я обнаружил, что экземпляр ignite развернут внутри всех исполнителей с помощью метода parallize контекста spark, экземпляр ignite остановлен с использованием события sparkслушатели (а именно на конце приложения). Я не мог понять, запускается ли ignite на динамически добавленных искровых исполнителях? Я не мог найти такой код в IgniteContext. Кто-нибудь может прокомментировать это?

...