Я знаю именованные каналы в Linux, но он работает только в оперативной памяти, есть ли реализация, которая может записывать на HDD? Я пытаюсь получить некоторые данные из процесса, который записывает много данных в течение всего дня, и мне нужно отфильтровать эти данные и выполнить некоторые задачи постобработки. Моей первой идеей была именованная труба с процессом записи и чтения. Но иногда входящие данные не могут быть обработаны так быстро, как это необходимо, и канал может перейти в состояние конца памяти.
Поскольку последовательность данных не важна, могу ли я использовать несколько процессов считывания, чтобы распараллелить работу?