Синхронизация c файлов каталогов в Google Cloud Composer dags / folder - PullRequest
0 голосов
/ 28 апреля 2020

Я хотел бы синхронизировать c содержимое папки в моем хранилище с папкой GCP Composer dags/ простой командой.

Кажется, что gcloud composer cli однако команда для этого оставляет предупреждение о том, что поддержка групповых символов удаляется.

>> gcloud composer environments storage dags import \
      --source="dir/*" \
      --environment={env_name} \
      --location={loc}
WARNING: Use of gsutil wildcards is no longer supported in --source. Set the storage/use_gsutil property to get the old behavior back temporarily. However, this property will eventually be removed.

Есть ли способ использовать эту команду, которая дает такой же эффект расширения содержимого dir в composer dags/ папка, которая не является устаревшей? Я изучил gsutil rsync, но эта команда очень затрудняет игнорирование определенных файлов и каталогов. GCloud имеет хороший .gcloudignore файл, который обрабатывает это для вас.

...