Монтирование S3 в DBFS (azure блоки данных), целое число добавляется с путем монтирования

Question

Я смонтировал s3 bucket в DBFS. После размонтирования я попытался перечислить файлы в каталоге

например:% fs ls / mnt / TmpS3SampleDB /

Вывод: java .io.FileNotFoundException: Файл / 743456612344 / mnt / TmpS3SampleDB / не существует.

В приведенном выше выводе я не понимаю, откуда исходит interger-743456612344.

Может кто-нибудь пожалуйста, объясни . Я использую azure блоки данных.

Answer 1

Примечание: Azure Блоки данных взаимодействуют с хранилищем объектов, используя семантику каталогов и файлов вместо URL-адресов хранения.

"743456612344" это идентификатор каталога, связанный с блоками данных.

Когда вы пытаетесь перечислить файлы в WASB с помощью dbutils.fs.ls или Had oop API, вы получаете следующее исключение:

java .io.FileNotFoundException: Файл / не существует.

Подробнее см. " Файловая система Databricks ".

Надеюсь, это поможет. Дайте нам знать, если у вас есть какие-либо дополнительные вопросы.

Answer 2

Скорее всего, он сгенерирован локальным API.

Вместо этого вы должны набрать

%fs ls /dbfs/mnt/TmpS3SampleDB/

.