Хранилище EBS для EMR - PullRequest
Новая
       61

Хранилище EBS для EMR

0 голосов
/ 16 мая 2018

Может ли кто-нибудь уточнить, какой может быть вариант использования тома EBS в кластере EMR (транзисторный / по требованию кластер).

Каковы преимущества использования тома EBS вЭЙ?поскольку EBS также будет удален, с завершением кластера EMR.

Я планирую настроить кластер EMR для запуска заданий ETL на основе искры, и, пожалуйста, ищите некоторые входные данные.Я могу использовать EMRFS / S3, но мне просто интересно, почему у нас есть EBS в EMR.

Спасибо.

1 Ответ

0 голосов
/ 16 мая 2018

Некоторые типы экземпляров EC2, поддерживаемые EMR, не имеют никакого хранилища, кроме поддержки EBS (например, серии c4 и m4). В этом случае экземплярам потребуется EBS для использования с EMR, и к каждому экземпляру будет добавлен том по умолчанию в 10 ГБ, если вы не укажете больший том.

Конечно, EBS также можно использовать с другими типами экземпляров, которые уже включают хранилище, если вам требуется дополнительное хранилище сверх того, что обеспечивает экземпляр.

Для получения дополнительной информации о EMR и EBS см. https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-storage.html

...