Я ищу поточно-ориентированную альтернативу hdf5 для чтения в многопроцессорной среде и наткнулся на zarr , который, согласно тестам, по сути, является заменой h5py всреда питона.
Я попробовал это, и пока все выглядит хорошо, но я не могу обернуть голову количеством файлов, выводимых zarr.
Если я записываю в h5-файл с h5py, получается только один файл, тогда как zarr , похоже, выдает случайное количество файлов в подпапке.
Кто-нибудь объяснит мне, почему это так и от чего зависит точное количество созданных файлов?
заранее спасибо