Работает ли снимок hdfs при добавлении данных? - PullRequest
0 голосов
/ 14 мая 2018

Я понял, что снимок hdfs отслеживает добавленные или удаленные файлы из каталога.Каково поведение, когда у меня есть файлы (PARQUET), которые добавляются непрерывно?

1 Ответ

0 голосов
/ 24 апреля 2019

Когда вы создаете снимок каталога / файла, они добавляются в подкаталог /. Snapshot , поэтому они упорядочиваются по возрастанию даты независимо от формата файла! Максимального количества снимков нет.

Снимок hdfs отслеживает добавленные или удаленные файлы из каталога

Поправьте меня, если я ошибаюсь, но снимок отслеживает каждое отдельное изменение (даже в файле), а не только добавленные и удаленные файлы из каталога.

Надеюсь, это поможет вам понять их поведение!

Документация по снимкам HDFS

...