Запуск apache beam в функции Google Cloud Triger или лямбда-функции AWS в Python - PullRequest
0 голосов
/ 23 января 2019

Я разрабатываю модуль как для Google Cloud Storage, так и для AWS s3. В основном я сосредоточился на триггерных функциях, т. Е. На триггере хранения в GCP и на лямбде в AWS.

Я использую язык Python для разработки и фактически использую Apache Beam (Python SDK). Я использую Apache Beam для эффективной публикации больших файлов на Kafka

Я хочу знать, имеет ли смысл запускать Apache Beam (прямой запуск) на AWS-лямбда-функции или в облачной функции запуска Google, и поддерживает ли эта служба многопоточную среду?

...