Как добавить подпись AWS v4 в Apache Flume для сброса данных в корзину s3? - PullRequest
Новая
       36

Как добавить подпись AWS v4 в Apache Flume для сброса данных в корзину s3?

0 голосов
/ 05 марта 2019

Какие изменения необходимы в файле свойств агента Flume для миграции в регион AWS, для которого требуется подпись версии 4 для корзины s3. Ниже приведена текущая конфигурация моего приемника, которая прекрасно работает в регионе, который поддерживает подпись AWS версии 2. 

a1.sinks.k1.type=hdfs
a1.sinks.k1.hdfs.path=s3n://<Access_KEY>:<Secret_Key>@<BUCKET_PATH>
a1.sinks.k1.hdfs.fileType=DataStream
a1.sinks.k1.hdfs.writeFormat=Text
a1.sinks.k1.hdfs.rollInterval=0
a1.sinks.k1.hdfs.rollSize=1048576
a1.sinks.k1.hdfs.rollCount=0
a1.sinks.k1.hdfs.idleTimeout=60
...