У меня есть некоторые данные avro с ts, который является логическим типом avro [timestamp-millis][1].
Мне нужно загрузить их в bigquery и разделить их на ts.
Могу ли я использовать аргументы --schema и --time_partitioning_field для преобразования ts в метку времени, а затем разбить на нее? например,
bq load --schema ts:timestamp --time_partitioning_field ts
ИЛИ, следует ли использовать bigquery UDF? есть подсказки?
Я занимаюсь неким дизайном и не могу получить доступ к среде bigquery, чтобы проверить приведенные выше аргументы.
Спасибо