Есть ли в любом случае для hadoop использовать несколько регионов S3? - PullRequest
0 голосов
/ 31 августа 2018

Файл, который я читаю, us-west

Однако та корзина, в которую я пишу, находится у нас на востоке, есть ли способ настроить hasoop для чтения и записи из нескольких корзин?

final String s3ExternalEndpoint = "s3-us-west-1.amazonaws.com";
conf.set("fs.s3a.endpoint", s3ExternalEndpoint);
conf.set("qubole.s3.standard.endpoint", s3ExternalEndpoint);

Сейчас я вижу, что чтение прошло успешно, но запись не удалась.

 Error: com.qubole.com.amazonaws.services.s3.model.AmazonS3Exception: The bucket is in this region: us-east-1. 
...