Я хочу получить количество рабочих и рабочую конфигурацию кластера dataproc, используя его имя через мой код Python
Вы можете использовать клиентские библиотеки Python Dataproc Cloud , чтобы запросить у API Dataproc эту информацию.
Используйте метод get_cluster , чтобы получить кластер по имени иProjectID. Возвращенный кластерный объект будет иметь количество рабочих, имена рабочих узлов и другую информацию о конфигурации.