Отправка PySpark в Amazon EMR - PullRequest
       14

Отправка PySpark в Amazon EMR

0 голосов
/ 04 декабря 2018

Я пытаюсь настроить один скрипт Python:

if __name__ == "__main__":
   print('Hello World')

В Amazon EMR.

Когда я пытаюсь использовать платформу (console.aws.com), я могуне выполни это.Я использую простое:

  • Добавить шаг
  • Тип шага: Spark-приложение
  • Расположение приложения: 's3 directory'

Я получаю следующую ошибку от консоли. ПРЕДУПРЕЖДЕНИЕ. Шаг завершился неудачно с помощью exitCode 1 и занял 4 секунды

Почему это так?Что мне нужно добавить в раздел Spark-submit?Как насчет аргументов?

...