Как прочитать данные S3 из одного кластера EMR в другой кластер EMR?

Question

У меня есть два кластера EMR и один кластер EMR с файлами CSV в корзине S3. Теперь у меня есть другой кластер EMR, и я должен прочитать данные из корзины EMR (s3).

Пожалуйста, найдите скриншот.

Как прочитать данные из другого контейнера EMR s3? Входным источником является S3-контейнер для чтения CSV-файлов. В той же EMR я могу читать данные из корзины s3.

Пожалуйста, помогите мне.

Большое спасибо за вашу помощь заранее.

Answer 1

S3 - это независимый веб-сервис Amazon, S3 не привязан к какому-либо конкретному кластеру EMR, вы можете получить доступ к одному сегменту S3 от любого количества потребителей (в данном случае EMR) таким же образом, просто убедитесь, что политики AWS IAM / разрешения правильные.