Самый быстрый способ подать файл с помощью PHP

Question

Я пытаюсь собрать функцию, которая получает путь к файлу, определяет, что это такое, устанавливает соответствующие заголовки и обслуживает его так же, как это сделал бы Apache.

Причина, по которой я это делаю, заключается в том, чтоМне нужно использовать PHP для обработки некоторой информации о запросе перед обработкой файла.

Скорость критична

virtual () не вариант

Должен работать в среде общего хостинга, где пользователь не может контролировать веб-сервер (Apache / nginx и т. Д.)

Вот что у меня естьдо сих пор:

File::output($path);

<?php
class File {
static function output($path) {
    // Check if the file exists
    if(!File::exists($path)) {
        header('HTTP/1.0 404 Not Found');
        exit();
    }

    // Set the content-type header
    header('Content-Type: '.File::mimeType($path));

    // Handle caching
    $fileModificationTime = gmdate('D, d M Y H:i:s', File::modificationTime($path)).' GMT';
    $headers = getallheaders();
    if(isset($headers['If-Modified-Since']) && $headers['If-Modified-Since'] == $fileModificationTime) {
        header('HTTP/1.1 304 Not Modified');
        exit();
    }
    header('Last-Modified: '.$fileModificationTime);

    // Read the file
    readfile($path);

    exit();
}

static function mimeType($path) {
    preg_match("|\.([a-z0-9]{2,4})$|i", $path, $fileSuffix);

    switch(strtolower($fileSuffix[1])) {
        case 'js' :
            return 'application/x-javascript';
        case 'json' :
            return 'application/json';
        case 'jpg' :
        case 'jpeg' :
        case 'jpe' :
            return 'image/jpg';
        case 'png' :
        case 'gif' :
        case 'bmp' :
        case 'tiff' :
            return 'image/'.strtolower($fileSuffix[1]);
        case 'css' :
            return 'text/css';
        case 'xml' :
            return 'application/xml';
        case 'doc' :
        case 'docx' :
            return 'application/msword';
        case 'xls' :
        case 'xlt' :
        case 'xlm' :
        case 'xld' :
        case 'xla' :
        case 'xlc' :
        case 'xlw' :
        case 'xll' :
            return 'application/vnd.ms-excel';
        case 'ppt' :
        case 'pps' :
            return 'application/vnd.ms-powerpoint';
        case 'rtf' :
            return 'application/rtf';
        case 'pdf' :
            return 'application/pdf';
        case 'html' :
        case 'htm' :
        case 'php' :
            return 'text/html';
        case 'txt' :
            return 'text/plain';
        case 'mpeg' :
        case 'mpg' :
        case 'mpe' :
            return 'video/mpeg';
        case 'mp3' :
            return 'audio/mpeg3';
        case 'wav' :
            return 'audio/wav';
        case 'aiff' :
        case 'aif' :
            return 'audio/aiff';
        case 'avi' :
            return 'video/msvideo';
        case 'wmv' :
            return 'video/x-ms-wmv';
        case 'mov' :
            return 'video/quicktime';
        case 'zip' :
            return 'application/zip';
        case 'tar' :
            return 'application/x-tar';
        case 'swf' :
            return 'application/x-shockwave-flash';
        default :
            if(function_exists('mime_content_type')) {
                $fileSuffix = mime_content_type($path);
            }
            return 'unknown/' . trim($fileSuffix[0], '.');
    }
}
}
?>

Answer 1

Мой предыдущий ответ был частичным и не очень хорошо задокументирован, вот обновление с кратким изложением решений от него и от других участников обсуждения.

Решения упорядочены от наилучшего решения к худшему, а также от решения, требующего наибольшего контроля над веб-сервером, до решения, требующего меньшего. Кажется, не существует простого способа иметь одно решение, которое было бы быстрым и работало повсюду.

---

Использование заголовка X-SendFile

Как задокументировано другими, это на самом деле лучший способ. Основой является то, что вы делаете свой контроль доступа в php, а затем вместо того, чтобы отправлять файл самостоятельно, вы говорите веб-серверу сделать это.

Основной код php:

header("X-Sendfile: $file_name");
header("Content-type: application/octet-stream");
header('Content-Disposition: attachment; filename="' . basename($file_name) . '"');

Где $file_name - полный путь в файловой системе.

Основная проблема этого решения заключается в том, что он должен быть разрешен веб-сервером и либо не установлен по умолчанию (apache), либо не активен по умолчанию (lighttpd), либо требует специальной конфигурации (nginx).

Apache

В apache, если вы используете mod_php, вам нужно установить модуль с именем mod_xsendfile , а затем настроить его (либо в конфигурации apache, либо в .htaccess, если вы это разрешите)

XSendFile on
XSendFilePath /home/www/example.com/htdocs/files/

С этим модулем путь к файлу может быть либо абсолютным, либо относительно указанного XSendFilePath.

Lighttpd

Mod_fastcgi поддерживает это при настройке с

"allow-x-send-file" => "enable" 

Документация для этой функции есть в lighttpd wiki , они документируют заголовок X-LIGHTTPD-send-file, но имя X-Sendfile также работает

Nginx

В Nginx вы не можете использовать заголовок X-Sendfile, вы должны использовать собственный заголовок с именем X-Accel-Redirect. Он включен по умолчанию, и единственное реальное отличие состоит в том, что его аргумент должен быть URI, а не файловой системой. Следствием этого является то, что вы должны определить местоположение, помеченное как внутреннее в вашей конфигурации, чтобы клиенты не находили реальный URL файла и не переходили непосредственно к нему, их вики содержит хорошее объяснение этого.

Символические ссылки и заголовок Location

Вы можете использовать символические ссылки и перенаправлять на них, просто создавая символические ссылки на ваш файл со случайными именами, когда пользователь авторизован для доступа к файлу и перенаправить пользователя на него, используя:

header("Location: " . $url_of_symlink);

Очевидно, вам понадобится способ обрезать их либо при вызове скрипта для их создания, либо через cron (на компьютере, если у вас есть доступ, либо через какой-либо сервис webcron в противном случае)

В apache необходимо включить FollowSymLinks в .htaccess или в конфигурации apache.

Контроль доступа по IP и заголовку местоположения

Еще один хак - генерировать файлы доступа Apache из php, разрешая явный IP-адрес пользователя. Под apache это означает использование mod_authz_host (mod_access) Allow from команд.

Проблема в том, что блокировка доступа к файлу (так как несколько пользователей могут захотеть сделать это одновременно) не тривиальна и может привести к тому, что некоторые пользователи будут ждать долго. И все равно вам все равно нужно удалить файл.

Очевидно, что другая проблема может заключаться в том, что несколько человек за одним и тем же IP могут получить доступ к файлу.

Когда все остальное терпит неудачу

Если у вас действительно нет способа заставить ваш веб-сервер помочь вам, единственное оставшееся решение - это readfile , оно доступно во всех используемых в настоящее время версиях php и работает довольно хорошо (но не т действительно эффективный).

---

Комбинированные решения

В общем, лучший способ действительно быстро отправить файл, если вы хотите, чтобы ваш php-код использовался везде, - это иметь где-то настраиваемую опцию с инструкциями по ее активации в зависимости от веб-сервера и, возможно, автоопределением. в вашем скрипте установки.

Это очень похоже на то, что делается во многих программах для

• Чистые URL (mod_rewrite на apache)
• Крипто-функции (mcrypt php модуль)
• Поддержка многобайтовой строки (mbstring модуль php)

Answer 2

Самый быстрый способ: не надо. Загляните в заголовок x-sendfile для nginx , аналогичные вещи есть и для других веб-серверов. Это означает, что вы все еще можете управлять доступом и т. Д. В php, но делегировать фактическую отправку файла на веб-сервер, предназначенный для этого.

P.S .: Я чувствую озноб, просто думая о том, насколько более эффективно использовать это с nginx, по сравнению с чтением и отправкой файла в php. Подумайте только, если 100 человек скачивают файл: с php + apache, будучи щедрым, это, вероятно, 100 * 15 МБ = 1,5 ГБ (приблизительно, стреляйте в меня) оперативной памяти. Nginx просто отправит файл ядру, а затем загрузит его прямо с диска в сетевые буферы. Speedy!

P.P.S: И с помощью этого метода вы все еще можете выполнять все необходимые функции управления доступом, базы данных.

Answer 3

Здесь идет чистое решение PHP.Я адаптировал следующую функцию из моей личной структуры :

function Download($path, $speed = null, $multipart = true)
{
    while (ob_get_level() > 0)
    {
        ob_end_clean();
    }

    if (is_file($path = realpath($path)) === true)
    {
        $file = @fopen($path, 'rb');
        $size = sprintf('%u', filesize($path));
        $speed = (empty($speed) === true) ? 1024 : floatval($speed);

        if (is_resource($file) === true)
        {
            set_time_limit(0);

            if (strlen(session_id()) > 0)
            {
                session_write_close();
            }

            if ($multipart === true)
            {
                $range = array(0, $size - 1);

                if (array_key_exists('HTTP_RANGE', $_SERVER) === true)
                {
                    $range = array_map('intval', explode('-', preg_replace('~.*=([^,]*).*~', '$1', $_SERVER['HTTP_RANGE'])));

                    if (empty($range[1]) === true)
                    {
                        $range[1] = $size - 1;
                    }

                    foreach ($range as $key => $value)
                    {
                        $range[$key] = max(0, min($value, $size - 1));
                    }

                    if (($range[0] > 0) || ($range[1] < ($size - 1)))
                    {
                        header(sprintf('%s %03u %s', 'HTTP/1.1', 206, 'Partial Content'), true, 206);
                    }
                }

                header('Accept-Ranges: bytes');
                header('Content-Range: bytes ' . sprintf('%u-%u/%u', $range[0], $range[1], $size));
            }

            else
            {
                $range = array(0, $size - 1);
            }

            header('Pragma: public');
            header('Cache-Control: public, no-cache');
            header('Content-Type: application/octet-stream');
            header('Content-Length: ' . sprintf('%u', $range[1] - $range[0] + 1));
            header('Content-Disposition: attachment; filename="' . basename($path) . '"');
            header('Content-Transfer-Encoding: binary');

            if ($range[0] > 0)
            {
                fseek($file, $range[0]);
            }

            while ((feof($file) !== true) && (connection_status() === CONNECTION_NORMAL))
            {
                echo fread($file, round($speed * 1024)); flush(); sleep(1);
            }

            fclose($file);
        }

        exit();
    }

    else
    {
        header(sprintf('%s %03u %s', 'HTTP/1.1', 404, 'Not Found'), true, 404);
    }

    return false;
}

Код настолько эффективен, насколько это возможно, он закрывает обработчик сеанса, так что другие сценарии PHP могут выполняться одновременнодля того же пользователя / сеанса.Он также поддерживает загрузку в диапазонах (что, как я подозреваю, и делает по умолчанию Apache), так что люди могут приостанавливать / возобновлять загрузку, а также получать выгоду от более высоких скоростей загрузки с помощью ускорителей загрузки.Он также позволяет указать максимальную скорость (в кбит / с), с которой загрузка (часть) должна обслуживаться с помощью аргумента $speed.

Answer 4

header('Location: ' . $path);
exit(0);

Пусть Apache сделает всю работу за вас.

Answer 5

Лучшая реализация, с поддержкой кэша, настроенными заголовками http.

serveStaticFile($fn, array(
        'headers'=>array(
            'Content-Type' => 'image/x-icon',
            'Cache-Control' =>  'public, max-age=604800',
            'Expires' => gmdate("D, d M Y H:i:s", time() + 30 * 86400) . " GMT",
        )
    ));

function serveStaticFile($path, $options = array()) {
    $path = realpath($path);
    if (is_file($path)) {
        if(session_id())
            session_write_close();

        header_remove();
        set_time_limit(0);
        $size = filesize($path);
        $lastModifiedTime = filemtime($path);
        $fp = @fopen($path, 'rb');
        $range = array(0, $size - 1);

        header('Last-Modified: ' . gmdate("D, d M Y H:i:s", $lastModifiedTime)." GMT");
        if (( ! empty($_SERVER['HTTP_IF_MODIFIED_SINCE']) && strtotime($_SERVER['HTTP_IF_MODIFIED_SINCE']) == $lastModifiedTime ) ) {
            header("HTTP/1.1 304 Not Modified", true, 304);
            return true;
        }

        if (isset($_SERVER['HTTP_RANGE'])) {
            //$valid = preg_match('^bytes=\d*-\d*(,\d*-\d*)*$', $_SERVER['HTTP_RANGE']);
            if(substr($_SERVER['HTTP_RANGE'], 0, 6) != 'bytes=') {
                header('HTTP/1.1 416 Requested Range Not Satisfiable', true, 416);
                header('Content-Range: bytes */' . $size); // Required in 416.
                return false;
            }

            $ranges = explode(',', substr($_SERVER['HTTP_RANGE'], 6));
            $range = explode('-', $ranges[0]); // to do: only support the first range now.

            if ($range[0] === '') $range[0] = 0;
            if ($range[1] === '') $range[1] = $size - 1;

            if (($range[0] >= 0) && ($range[1] <= $size - 1) && ($range[0] <= $range[1])) {
                header('HTTP/1.1 206 Partial Content', true, 206);
                header('Content-Range: bytes ' . sprintf('%u-%u/%u', $range[0], $range[1], $size));
            }
            else {
                header('HTTP/1.1 416 Requested Range Not Satisfiable', true, 416);
                header('Content-Range: bytes */' . $size);
                return false;
            }
        }

        $contentLength = $range[1] - $range[0] + 1;

        //header('Content-Disposition: attachment; filename="xxxxx"');
        $headers = array(
            'Accept-Ranges' => 'bytes',
            'Content-Length' => $contentLength,
            'Content-Type' => 'application/octet-stream',
        );

        if(!empty($options['headers'])) {
            $headers = array_merge($headers, $options['headers']);
        }
        foreach($headers as $k=>$v) {
            header("$k: $v", true);
        }

        if ($range[0] > 0) {
            fseek($fp, $range[0]);
        }
        $sentSize = 0;
        while (!feof($fp) && (connection_status() === CONNECTION_NORMAL)) {
            $readingSize = $contentLength - $sentSize;
            $readingSize = min($readingSize, 512 * 1024);
            if($readingSize <= 0) break;

            $data = fread($fp, $readingSize);
            if(!$data) break;
            $sentSize += strlen($data);
            echo $data;
            flush();
        }

        fclose($fp);
        return true;
    }
    else {
        header('HTTP/1.1 404 Not Found', true, 404);
        return false;
    }
}

Answer 6

Упомянутая здесь функция PHP Download вызывала некоторую задержку, прежде чем файл действительно начал загружаться. Я не знаю, было ли это вызвано использованием кэша лака или чем, но для меня это помогло полностью удалить sleep(1); и установить $speed на 1024. Теперь это работает без каких-либо проблем, как быстро, как ад. Может быть, вы тоже можете изменить эту функцию, потому что я видел, что она используется во всем Интернете.

Answer 7

если у вас есть возможность добавить расширения PECL к вашему php, вы можете просто использовать функции из пакета Fileinfo , чтобы определить тип содержимого, а затем отправить правильные заголовки ...

Answer 8

Если вы хотите скрыть, где находится файл, и люди с особыми привилегиями могут загрузить файл, тогда рекомендуется использовать PHP в качестве ретранслятора, и вам придется пожертвовать некоторым временем ЦП, чтобы повысить безопасность и контроль.