Перемещайте файлы дельта-озера из одного хранилища в другое - PullRequest
0 голосов
/ 12 июля 2020

Мне нужно переместить файлы дельта-озера в новое хранилище больших двоичных объектов по другой подписке. Есть идеи, как лучше всего это сделать?

Я перемещаю их в хранилище ADLS Gen2, я думаю, что предыдущее хранилище было просто хранилищем BLOB-объектов. Это озеро в дельте обновляется ежечасно с помощью заданий по сборщикам данных (но я могу приостановить их, если необходимо). Размер составляет около 3–5 ТБ, я изначально думаю о приостановке всех заданий и использовании azcopy для перемещения файлов и последующего указания заданий туда. Но я хочу проверить другие варианты, которые могут быть лучше с точки зрения скорости передачи и стоимости.

1 Ответ

1 голос
/ 13 июля 2020

Лучше всего использовать Azure Фабрику данных. Здесь вы можете указывать на разные места и очень быстро перемещать файлы.

...