aws от s3 до s3 скопировать с использованием скрипта python на EC2 - PullRequest
0 голосов
/ 09 ноября 2018

Я планирую запустить сценарии для копирования файлов S3 из одного сегмента в другой сегмент в том же регионе (одна и та же учетная запись и другая учетная запись - в обоих случаях). Я использую скрипты Python и работаю на экземпляре EC2. 1) Будет ли производительность зависеть от типа сервера EC2? 2) Как лучше всего повысить производительность при копировании файлов S3 из одной учетной записи в другую (а также из одной корзины в другую в той же учетной записи того же региона). Учитывая, что они находятся в одном регионе и разных регионах. Размер файла составляет около 1 ГБ каждый с общим размером 5 ТБ

Спасибо Том

Дайте мне знать, если вам нужна какая-либо другая информация.

1 Ответ

0 голосов
/ 09 ноября 2018

Нет, в этом случае тип EC2 не будет иметь значения, поскольку вы используете сеть AWS для передачи данных из одного сегмента в другой. Если вы хотите ускорить параллельную обработку данных (запускать несколько циклов s3 одновременно), вы бы выбрали конкретный экземпляр, но в вашем случае T2 Small вполне подойдет.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...