Hdfs-эквивалент snapshotdiff и создает снимок в Gcloud - PullRequest
0 голосов
/ 05 марта 2020

Мы переносим наши существующие рабочие места из oop в GCP. Я обнаружил две hdfs-функции createSnapshot и snapshotDiff в нашем существующем коде oop. У нас есть их эквивалент в GCP?

1 Ответ

0 голосов
/ 12 марта 2020

Проекты табличного формата Delta Lake и Apache Iceberg теперь доступны в последней версии Cloud Datapro c (предварительный просмотр версии 1.5).

С этими форматами таблиц теперь можно использовать Datapro c для рабочих нагрузок, которые требуют:

  • ACID-транзакция
  • Управление версиями данных (так называемое путешествие во времени)
  • Применение схемы
  • Развитие схемы и многое другое

Управление версиями данных обеспечивает моментальный снимок ваших данных в истории. Вы можете просмотреть историю данных и вернуться к данным в определенное время или версии в истории.

Пожалуйста, обратитесь к документации . Надеюсь, это поможет.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...