Spark Ops и настройка производительности, Quoble критический путь? - PullRequest
0 голосов
/ 24 октября 2018

Я новичок в искре, и я работаю в области эксплуатации искровых кластеров.Проведя много исследований, связанных с работой искры и настройкой производительности, я нашел сборку проекта Quoble под названием sparklens.

Они объясняют идею критического пути , связанной с минимальным временем, необходимым дляИскра, чтобы закончить работу в фиксированной конфигурации (мы не сможем пройти меньше, чем время критического пути, даже если мы масштабируем число исполнителей до бесконечности).

Я хотел бы понять, действительно ли это понятие как общая истина или нет?

...