Как частично загрузить ZIP-файл в корзину S3? - PullRequest
0 голосов
/ 17 марта 2020

Я хочу, чтобы мои пользователи могли загружать много файлов из AWS S3-контейнера (потенциально более нескольких сотен ГБ при накоплении) в виде одного большого ZIP-файла. Я бы сначала скачал выбранные файлы с S3 и загрузил вновь созданный ZIP-файл на S3. Эта работа будет редко вызываться во время нашего обслуживания, поэтому я решил использовать для нее Lambda.

Но у Lambda есть свои ограничения - 15 минут времени выполнения, ~ 500 МБ /tmp хранилища и т. Д. c. Я нашел несколько обходных решений в Google, которые могут преодолеть ограничение хранилища (потоковое), но не нашел способа решить ограничение по времени выполнения.

Вот что я нашел до сих пор:

Обратите внимание, что язык программирования не беспокойство здесь.

Не могли бы вы дать мне предложение?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...