Можно ли развернуть метаданные шаблона задания Python для потока данных Google вместе с шаблоном (одной командой)? - PullRequest
Новая
       12

Можно ли развернуть метаданные шаблона задания Python для потока данных Google вместе с шаблоном (одной командой)?

0 голосов
/ 12 мая 2019

У меня есть задания потока данных, написанные на python в файле main.py, когда я хочу развернуть его как шаблон, я использую следующую команду: 

python main.py \
    --runner=DataflowRunner' \
    --template_location=gs://dataflow-bucket/templates/my_template \
    --project=foo \
    --staging_location=gs://dataflow-bucket/staging \
    --temp_location=gs://dataflow-bucket/temp

У меня также есть файл метаданных с именем my_template_metadata, который в настоящее время приходится загружать отдельно, используя gsutil

gsutil cp my_template_metadata gs://dataflow-bucket/templates/my_template_metadata

Есть ли способ развернуть файл метаданных одновременно с развертыванием шаблона?это было бы намного удобнее (или есть рациональная причина, по которой это невозможно?)

...