Я пытаюсь прочитать данные, хранящиеся в виде партера, в моем хранилище Azure ADLS.
Просто прочитать один файл в фрейм данных Pandas:
token = lib.auth(tenant_id = tenantId, client_secret = clientKey, client_id = clientId)
adlsFileSystemClient = core.AzureDLFileSystem(token, store_name=adls)
with adlsFileSystemClient.open("/path/to/file.parquet", 'rb') as f:
df = pd.read_parquet(f)
Но когда я пытаюсьчитать разделенный паркет:
with adlsFileSystemClient.open("/path/to/dir/2019/1/12/*.parquet", 'rb') as f:
df = pd.read_parquet(f)
У меня есть эта ошибка: azure.datalake.store.exceptions.FileNotFoundError: /path/to/dir/2019/1/12/*.parquet