Мой конвейер данных часто прерывается, что приводит к открытию hdf5-файлов; Доступ на чтение требуется примерно раз в секунду. Вместо того, чтобы держать файл открытым и читать из него напрямую, я рассматриваю with ...: data = hdf5[key], чтобы гарантировать закрытие. Я читал, что одновременный доступ к файлу hdf5 может повредить его, но не нашел материала по частым открытиям и закрытиям; Есть ли какие-либо проблемы со стабильностью / повреждением?
Примечание : я получаю доступ к небольшой части (1/100) данных (60 ГБ +) за раз, итеративно, каждый раз по-разному и в al oop (каждый раз разный порядок доступа).