Hadoop-Azure getFileCheckSum возвращает ноль - PullRequest
0 голосов
/ 28 сентября 2019

Мы пытаемся прочитать контрольную сумму файлов BLOB-объектов хранилища BLOB-объектов Azure, но нам дано нулевое значение:

import org.apache.hadoop.fs.{FileStatus, LocatedFileStatus, Path}
val fsPath = new Path("wasbs://test@testaccount.blob.core.windows.net/testfile")
val fs = fsPath.getFileSystem(sc.hadoopConfiguration)
val checksum = fs.getFileChecksum(fsPath)

и мы получаем нулевое значение для контрольной суммы, но как для файлов s3, так и для файлов gs,мы можем вернуть действительную контрольную сумму, есть ли в любом случае, чтобы hadoop azure вел себя так же, как коннекторы s3 / gs hadoop?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...