как получить PID искрового исполнителя в pyspark - PullRequest
0 голосов
/ 06 июня 2018

предположим, что задание spark, запущенное в режиме кластера, запускает 3 исполнителя в режиме кластера, а затем, как получить идентификатор процесса (PID) каждого из процессов-исполнителей в кластере искры. есть ли API для этого в pyspark .?

РЕДАКТИРОВАТЬ: Вопрос о ID процесса (PID) исполнителя, а не ID исполнителя.Итак, как получить идентификатор процесса исполнителя с помощью API-интерфейса pyspark .?

...