Я не уверен, есть ли способ сделать это на этапе, но вы можете сделать это в своих инструкциях копирования.
, чтобы вы могли настроить свой этап следующим образом:
CREATE OR REPLACE STAGE MY_STAGE
url = 'azure://mystorage.blob.core.windows.net/mycontainer/myfolder/'
credentials = ...
file_format = (type = 'parquet')
;
и затем используйте копию в оператор, который выглядит примерно так:
copy into mytable
from @MY_STAGE
pattern='.*/myparquet';
См. Копирование в документацию .