curl: Как ограничить размер GET?

Question

Я хочу получить первые 10 Кбайт из URL с помощью curl (используя PHP в моем случае). Есть ли способ указать это? Я думал, что CURLOPT_BUFFERSIZE сделает это, но он просто определяет размер буфера, который используется повторно до тех пор, пока весь контент не будет получен.

Answer 1

Вот как я это делаю в C ++

int offset = 0;
int size = 10*1024;

char range[256];
curl_slist_s *pHeaders = NULL;
snprintf(range, 256, "Range: bytes=%d-%d", offset, offset+size-1);

pHeaders = curl_slist_append(pHeaders, range);
curl_easy_setopt(pCurlHandle, CURLOPT_HTTPHEADER, pHeaders);

curl_slist_free_all(pHeaders);
pHeaders = NULL;

Edit: только что узнал, что вы имели в виду в php. Посмотрю, смогу ли я узнать, как его портировать.

Думаю, это должно работать в php:

$offset = 0;
$size = 10*1024;

$a = $offset;
$b = $offset + $size-1;

curl_easy_setopt(curlHandle, CURLOPT_HTTPHEADER, array("Range: bytes=$a-$b") );

Answer 2

Что по этому поводу:

// 1-10240 is range of downloaded bytes (10 kb = 10240 byte)
curl_setopt($ch, CURLOPT_RANGE,"1-10240");

Answer 3

Если вы используете fread вместо curl, хотя я предпочитаю curl, вы можете указать размер данных, которые хотите получить, например:

$fp = @fopen($url, "r") ;

$data = "" ;
if($fp) {
    while (!feof($fp)) {
        $data .= fread($fp, $size) ;
}
fclose($fp) ;

Answer 4

CURLOPT_RANGE, похоже, не работает в PHP, хотя он есть. По крайней мере, это не оказало влияния, когда я попытался его использовать, и поиск в Google покажет много сообщений того же типа.

Answer 5

$html='';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL,$url);
curl_setopt($ch, CURLOPT_BUFFERSIZE, 128);
curl_setopt($ch, CURLOPT_NOPROGRESS, false);
curl_setopt($ch, CURLOPT_PROGRESSFUNCTION, function($DownloadSize, $Downloaded, $UploadSize, $Uploaded){ return ($Downloaded > 10240) ? 1 : 0;});
curl_setopt($ch, CURLOPT_WRITEFUNCTION, 'write_function');
curl_exec($ch);
curl_close($ch);
echo $html;

function write_function($handle, $data) {
    global $html;
    $html .= $data;
    if (strlen($html) > 10240) {
        return 0;
    }
    else
        return strlen($data);
}