Почему скорость передачи CF FTP в несколько раз ниже, чем у стандартного FTP? - PullRequest
4 голосов
/ 26 мая 2011

У меня есть приложение ColdFusion, которое я использую для передачи файлов между нашими серверами разработки и производства.Код, который на самом деле отправляет файлы, выглядит следующим образом:

ftp = new Ftp();
ftp.setUsername(username);
ftp.setPassword(password);
ftp.setServer(server);
ftp.setTimeout(1800);
ftp.setConnection('dev');
ftp.open();
ftp.putFile(transferMode="binary",localFile=localpath,remoteFile=remotepath);
ftp.close(connection='dev');

При отправке файла с использованием вышеуказанного кода я ограничиваюсь скоростью менее 100 КБ / с (отслеживается с помощью FileZilla на принимающем сервере).Если я отправляю точно такой же файл с помощью средства FTP командной строки Windows, мои скорости превышают 1000 КБ / с.

Я создал новый файл, в котором нет ничего, кроме приведенного выше кода, и это не влияет наскорость передачи, так что я знаю, что это не имеет ничего общего с окружающим кодом в исходном приложении.

Итак, что может быть причиной этих ужасно низких скоростей?

Редактировать: Все тесты выполняютсяпередача файлов с моего рабочего сервера на сервер разработки.Я также попытался использовать тег <cfftp> вместо cfscript, и у меня те же результаты.

Редактировать # 2 : я закончил с использованием cfexecute, код выглядит следующим образом:

Из моего сценария FTP:

public function sendFiles(required string localpath, required string remotepath) {
    this.writeFtpInstructions(localpath);
    exe = "C:\Windows\system32\ftp.exe";
    params = "-s:" & request.localapproot & "/" & "upload.txt";
    outputfile = request.localapproot & '/ftp.log';
    timeout = 120;
    Request.cliExec(exe,params,outputfile,timeout);
}

public function writeFtpInstructions(required string localpath) {
    instructions = request.localapproot & "/" & "upload.txt";
    crlf = chr(13) & chr(10);
    data = "";
    data &= "open " & this.server & crlf;
    data &= this.username & crlf;
    data &= this.password & crlf;
    data &= "cd " & request.remoteapproot & crlf;
    data &= "put " & localpath & crlf;
    data &= "quit";
    FileWrite(instructions, data);
}

Функция cliExec() (необходима для создания оболочки, поскольку в cfscript нет эквивалента cfexecute):

<cffunction name="cliExec">
    <cfargument name="name">
    <cfargument name="arguments">
    <cfargument name="outputfile">
    <cfargument name="timeout">
    <cfexecute
        name="#name#"
        arguments="#arguments#"
        outputFile="#outputfile#"
        timeout="#timeout#" />
</cffunction>

Ответы [ 2 ]

3 голосов
/ 10 января 2012

С моим опытом использования cfftp на CF9 было невозможно передавать большие файлы. Если вы просматриваете активные передачи на стороне FTP-сервера, вы заметите, что передачи начинаются с максимальной скоростью, но по мере того, как передается все больше и больше данных, скорости продолжают падать. После того, как было передано 100 МБ, сокращение стало очень резким, пока в итоге не достигло однозначного сканирования. В конце концов, тайм-аут передачи завершился неудачно. Я пытался работать с файлом размером 330 МБ и обнаружил невозможность передачи с использованием cfftp. Cfexecute не был для меня опцией, использующей стандартный windows ftp.exe, потому что он не поддерживает SFTP.

В итоге я искал внешний класс Java для использования в Coldfusion и остановился на JSch (http://www.jcraft.com/jsch/). Как ни странно, CF9, похоже, использует вариант этого класса для CFFTP (jsch-0,1.41m.jar), но результаты сильно отличаются от этой последней загруженной версии (jsch-0.1.45.jar).

Вот код, который я собрал для подтверждения концепции:

<cfscript>
    stAppPrefs = {
        stISOFtp = {
             server = 'sftp.server.com',
             port = '22',
             username = 'youser',
             password = 'pa$$w0rd'
        }
    };

    /* Side-Load JSch Java Class (http://www.jcraft.com/jsch/) */
    try {
        // Load Class Using Mark Mandel's JavaLoader (http://www.compoundtheory.com/?action=javaloader.index)
        /* 
        Add Mark's LoaderClass To The ColdFusion Class Path Under CF Admin:
        Java and JVM : ColdFusion Class Path : C:\inetpub\wwwroot\javaloader\lib\classloader-20100119110136.jar
        Then Restart The Coldfusion Application Service
        */
        loader = CreateObject("component", "javaloader.JavaLoader").init([expandPath("jsch-0.1.45.jar")]);
        // Initiate Instance
        jsch = loader.create("com.jcraft.jsch.JSch").init();
    }
    catch(any excpt) {          
        WriteOutput("Error loading ""jsch-0.1.45.jar"" java class: " & excpt.Message & "<br>");
        abort;
    }

    /* SFTP Session & Channel */
    try {
        // Create SFTP Session
        session = jsch.getSession(stAppPrefs.stISOFtp.username, stAppPrefs.stISOFtp.server, stAppPrefs.stISOFtp.port);
        // Turn Off & Use Username/Password
        session.setConfig("StrictHostKeyChecking", "no");
        session.setPassword(stAppPrefs.stISOFtp.password);
        session.connect();
        // Create Channel To Transfer File(s) On
        channel = session.openChannel("sftp");
        channel.connect();
    }
    catch(any excpt) { 
        WriteOutput("Error connecting to FTP server: " & excpt.Message & "<br>");
        abort;
    } 

    // Returns Array Of Java Objects, One For Each Zip Compressed File Listed In Root DIR
    // WriteDump(channel.ls('*.zip'));      
    // Get First Zip File Listed For Transfer From SFTP To CF Server
    serverFile = channel.ls('*.zip')[1].getFilename();

    /* Debug */
    startTime = Now();
    WriteOutput("Transfer Started: " & TimeFormat(startTime, 'hh:mm:ss') & "<br>");
    /* // Debug */

    /* Transfer File From SFTP Server To CF Server */
    try {
        // Create File On Server To Write Byte Stream To
        transferFile = CreateObject("java", "java.io.File").init(expandPath(serverFile));
        channel.get(serverFile, CreateObject("java", "java.io.FileOutputStream").init(transferFile));
        // Close The File Output Stream
        transferFile = '';
    }
    catch(any excpt) { 
        WriteOutput("Error transfering file """ & expandPath(serverFile) & """: " & excpt.Message & "<br>");
        abort;
    }

    /* Debug */
    finishTime = Now();
    WriteOutput("Transfer Finished: " & TimeFormat(finishTime, 'hh:mm:ss') & "<br>");
    expiredTime = (finishTime - startTime);
    WriteOutput("Duration: " & TimeFormat(expiredTime, 'HH:MM:SS') & "<br>");
    WriteOutput("File Size: " & NumberFormat(Evaluate(GetFileInfo(ExpandPath(serverFile)).size / 1024), '_,___._') & " KB<br>");
    WriteOutput("Transfer Rate: " & NumberFormat(Evaluate(Evaluate(GetFileInfo(ExpandPath(serverFile)).size / 1024) / Evaluate(((TimeFormat(expiredTime, 'H') * 60 * 60) + (TimeFormat(expiredTime, 'M') * 60) + TimeFormat(expiredTime, 'S')))), '_,___._') & " KB/Sec <br>");
    /* // Debug */

    channel.disconnect();
    session.disconnect();
    </cfscript>

Результаты:

Transfer Started: 09:37:57
Transfer Finished: 09:42:01
Duration: 00:04:04
File Size: 331,770.8 KB
Transfer Rate: 1,359.7 KB/Sec

Достигнутая скорость передачи соответствует тому, что я получал, используя FileZilla FTP-клиент и загружая его вручную. Я нашел этот метод жизнеспособным решением для неадекватности cfftp.

2 голосов
/ 27 мая 2011

Я искал, и у меня нет ответа о том, почему он медленнее. Но, теоретически, вы должны иметь возможность использовать cfexecute для этого через командную строку Windows. Вы могли бы даже создать пакетный файл и сделать это за один вызов.

...