Получить метаданные из хранилища Azure Data Lake gen1

Question

Мы хотели бы получить метаданные из файловой системы. Есть ли что-то вроде fsImage, в котором хранится такая информация о медате? Мы использовали следующую команду:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS'

Но это дает только списки только метаданных одного уровня. Согласно документации HDFS Api, попытался использовать следующую команду:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS_BATCH&startAfter=<CHILD> #added code style

Но выдает ошибку, что не реализовано.

Answer 1

Я проверил поддержку Azur, и они отметили, что не все методы, предоставляемые Hadoop, реализованы. Так что в моем случае LISTSTATUS_BATCH не имеет значения.