AWS Glue - Dev Endpoint - ошибка 'userData. json' - PullRequest
1 голос
/ 11 марта 2020

Каждый раз, когда создается новая конечная точка разработки (новый кластер) - эта ошибка сначала отображается:

] util.UserData (UserData.java:getUserData(70)) - Error encountered while try to get user data
java.io.IOException: File '/var/aws/emr/userData.json' cannot be read

Как ее устранить?

Спасибо.

1 Ответ

0 голосов
/ 24 апреля 2020

Это одна из известных проблем при работе с кластерами EMR или конечными точками Glue Dev. При работе с кластером EMR вы всегда можете дать разрешение на файл, и ошибка просто исчезнет.

chmod 777 /var/aws/emr/userData.json

Но при использовании клея Dev Endpoint нам не предоставляется root доступ. Поддержка AWS предлагает игнорировать ошибку и продолжить выполнение, поскольку оно не останавливает выполнение .

Поэтому я попытался запустить свой скрипт, и он генерирует вывод, несмотря на ошибку .

Надеюсь, это поможет.

...