Мне не повезло в настройке репликации HDFS с разъемом S3 в CM 5.16. Я попытался использовать аутентификацию на основе ролей IAM и учетные данные ключа доступа, но ни один из них не работает. Нет сообщений об ошибках, но ничего из HDFS не реплицируется. Кто-нибудь еще имел успех с репликацией HDFS на S3?
Примечание: Из-за ограничений клиента / бюджета репликация из HDFS на S3 рассматривается как более дешевая альтернатива аварийного восстановления, а не производительности. Cloudera и связанные с ним форумы имеют приличное количество документации, показывающей, что S3 - не лучшая стратегия репликации.