Как я могу скопировать большой файл в Windows без CopyFile или CopyFileEx? - PullRequest
9 голосов
/ 18 сентября 2008

В Windows Server 2003 существует ограничение, запрещающее копировать чрезвычайно большие файлы пропорционально объему имеющейся у вас оперативной памяти. Ограничение содержится в функциях CopyFile и CopyFileEx, которые используются xcopy, Explorer, Robocopy и классом .NET FileInfo.

Вот ошибка, которую вы получаете:

Невозможно скопировать [имя файла]: недостаточно системных ресурсов для завершения запрошенной службы.

Это статья базы знаний на эту тему, но она относится к NT4 и 2000.

Есть также предложение использовать ESEUTIL из установки Exchange, но мне не повезло заставить его работать.

Кто-нибудь знает быстрый и простой способ справиться с этим? Я говорю о> 50 ГБ на машине с 2 ГБ ОЗУ. Я планирую запустить Visual Studio и просто написать что-нибудь, чтобы сделать это для меня, но было бы неплохо иметь что-то, что уже есть, стабильное и хорошо протестированное.

[Изменить] Я предоставил рабочий код C #, чтобы сопровождать принятый ответ.

Ответы [ 2 ]

13 голосов
/ 18 сентября 2008

Лучший вариант - просто открыть исходный файл для чтения, целевой файл для записи и затем циклически копировать его блок за блоком. В псевдокоде:

f1 = open(filename1);
f2 = open(filename2, "w");
while( !f1.eof() ) {
  buffer = f1.read(buffersize);
  err = f2.write(buffer, buffersize);
  if err != NO_ERROR_CODE
    break;
}
f1.close(); f2.close();

[Редактировать Asker] Хорошо, вот как это выглядит в C # (медленно, но, кажется, работает хорошо, и дает прогресс):

using System;
using System.Collections.Generic;
using System.IO;
using System.Text;

namespace LoopCopy
{
    class Program
    {
        static void Main(string[] args)
        {
            if (args.Length != 2)
            {
                Console.WriteLine(
                  "Usage: LoopCopy.exe SourceFile DestFile");
                return;
            }

            string srcName = args[0];
            string destName = args[1];

            FileInfo sourceFile = new FileInfo(srcName);
            if (!sourceFile.Exists)
            {
                Console.WriteLine("Source file {0} does not exist", 
                    srcName);
                return;
            }
            long fileLen = sourceFile.Length;

            FileInfo destFile = new FileInfo(destName);
            if (destFile.Exists)
            {
                Console.WriteLine("Destination file {0} already exists", 
                    destName);
                return;
            }

            int buflen = 1024;
            byte[] buf = new byte[buflen];
            long totalBytesRead = 0;
            double pctDone = 0;
            string msg = "";
            int numReads = 0;
            Console.Write("Progress: ");
            using (FileStream sourceStream = 
              new FileStream(srcName, FileMode.Open))
            {
                using (FileStream destStream = 
                    new FileStream(destName, FileMode.CreateNew))
                {
                    while (true)
                    {
                        numReads++;
                        int bytesRead = sourceStream.Read(buf, 0, buflen);
                        if (bytesRead == 0) break; 
                        destStream.Write(buf, 0, bytesRead);

                        totalBytesRead += bytesRead;
                        if (numReads % 10 == 0)
                        {
                            for (int i = 0; i < msg.Length; i++)
                            {
                                Console.Write("\b \b");
                            }
                            pctDone = (double)
                                ((double)totalBytesRead / (double)fileLen);
                            msg = string.Format("{0}%", 
                                     (int)(pctDone * 100));
                            Console.Write(msg);
                        }

                        if (bytesRead < buflen) break;

                    }
                }
            }

            for (int i = 0; i < msg.Length; i++)
            {
                Console.Write("\b \b");
            }
            Console.WriteLine("100%");
            Console.WriteLine("Done");
        }
    }
}
6 голосов
/ 18 сентября 2008

Если вы хотите написать код, одним из способов оптимизации является отправка файла порциями (например, используя MTOM ). Я использовал этот подход для отправки огромных файлов из центра обработки данных в наш офис для печати ..

Кроме того, проверьте упомянутую утилиту TeraCopy здесь ..

...