Я работаю искровые процессы с использованием Python (Pyspark). Я создаю кластер amazon EMR для запуска своих скриптов-искров, но когда кластер только что создан, запускается много процессов (¿?), Когда я проверяю интерфейс кластера:
Итак, когда я пытаюсь запустить свой собственный сценарий, они входят в бесконечную очередь, иногда принимаются, но никогда не переходят в состояние RUNNING.
Я не смог найти информацию об этой проблеме даже на форумах Amazon, поэтому буду рад любому совету.
Заранее спасибо.