Python: Как подключиться к снежинке, используя Apache Beam? - PullRequest
1 голос
/ 29 января 2020

Я вижу, что для BigQuery есть встроенный разъем ввода / вывода, но большая часть наших данных хранится в Snowflake. Есть ли обходной путь для подключения к Snowflake? Единственное, что я могу придумать, это использовать sqlalchemy для запуска запроса, а затем вывести вывод в облачные хранилища, и тогда Apache -Beam сможет получить входные данные из файлов, хранящихся в ведре.

1 Ответ

1 голос
/ 29 января 2020

Служба поддержки Google Cloud здесь!

Нет прямого соединения между Snowflake и Cloud Dataflow, но одним из обходных путей будет то, что вы упомянули. Сначала сохраните выходные данные в облачном хранилище, а затем подключите облачное хранилище к облачному потоку данных.

Надеюсь, это поможет.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...