Процесс AWS EMR сразу же после входа в S3

Question

Моя фактическая реализация включает Device Farm & EMR.Device Farm создает журналы и сохраняет их в S3, и я хочу, чтобы EMR немедленно забрал их и обработал (конечная цель - передать структурированную структурированную информацию в DynamoDB).

Какой наилучший подход?Возможно ли это сделать без интеграции еще одной вещи, которая проверяет, нет ли новых записей в S3?

Answer 1

Вы можете использовать события в вашем S3 bucket.Создать событие, а именно.всякий раз, когда создается новый объект (файл журнала);вызвать лямбда-или SNS-уведомление (которое, в свою очередь, вызывает EMR)