Как определить, когда файлы будут скопированы для дальнейшей обработки?

Question

Хорошо, чтобы начать, это строго для Windows, и я предпочел бы использовать C ++ вместо .NET, но я не против boost::filesystem, хотя, если этого можно избежать в пользу простого Windows API, я бы предпочел, чтобы .

Теперь сценарий - это приложение на другом компьютере, которое я не могу изменить, создающее файлы в определенном каталоге на компьютере, из которого мне нужно сделать резервные копии, и выполнить дополнительную обработку. В настоящее время я создал небольшое приложение, которое будет сидеть и слушать уведомления об изменениях в целевом каталоге, используя FindFirstChangeNotification и FindNextChangeNotification Windows API.

Проблема в том, что, хотя я могу получать уведомления, когда в каталоге создаются новые файлы, изменяются их размеры и т. Д., Он уведомляет об этом только один раз и не сообщает мне, какие именно файлы. Я также посмотрел на ReadDirectoryChangesW, но это та же история, за исключением того, что я могу получить немного более конкретную информацию.

Теперь я могу сканировать каталог и пытаться получить блокировки или открыть файлы, чтобы определить, что конкретно изменилось с момента последнего уведомления и доступны ли они для дальнейшего использования, но в случае копирования большого файла я обнаружил, что это не так. не достаточно хорош, так как файл не будет готов для манипулирования, и я не получу никаких других уведомлений после первого, так что нет никакого способа узнать, когда он фактически завершил копирование, если только после первого уведомления я постоянно пытаюсь получить блокировки пока это не удастся.

Единственное, что я могу придумать, было бы менее хакерским, если бы у меня был какой-то токен end , но я не могу контролировать приложение, создающее файлы в первую очередь. Я не понимаю, как бы я поступил так, и это все еще не идеально.

Есть предложения?

Answer 1

Это довольно распространенная проблема, на которую нет простого ответа.Получение блокировок - один из лучших вариантов, когда вы не можете изменить вещь на удаленном конце.Еще я видел, как смотреть файл с интервалами, пока размер не изменится в течение одного или двух интервалов.

Другие стратегии включают запись файла без байтов в качестве триггера, когда основной файл завершен, и записьво временный каталог, а затем переместить весь файл в реальное место назначения.Но чтобы быть надежным, это должен быть отправитель, который контролирует это.Как получатель, вы вынуждены наблюдать за каталогом и ждать, пока файл установится.

Answer 2

Похоже, ReadDirectoryChangesW будет вашим лучшим выбором. Для каждой операции копирования файла вы должны получать FILE_ACTION_ADDED с последующим набором уведомлений FILE_ACTION_MODIFIED. В последнем уведомлении FILE_ACTION_MODIFIED файл больше не должен блокироваться процессом копирования. Таким образом, если вы попытаетесь получить блокировку после каждого FILE_ACTION_MODIFIED копии, она должна завершиться ошибкой до завершения копирования. Это не очень элегантное решение, но, кажется, нет никаких уведомлений о том, когда копия файла завершится.

Answer 3

Вы можете обработать данные после закрытия файла, верно? Поэтому задача состоит в том, чтобы отслеживать, когда файл закрыт. Это можно сделать с помощью драйвера фильтра файловой системы. Вы можете написать свой собственный или использовать наш CallbackFilter продукт.