Как скачать веб-страницу в php

Question

Мне было интересно, как я могу загрузить веб-страницу в php для разбора?

Answer 1

Вы можете использовать что-то вроде этого

$homepage = file_get_contents('http://www.example.com/');
echo $homepage;

Answer 2

Поскольку вы, вероятно, захотите проанализировать страницу с помощью DOM , вы можете загрузить страницу напрямую с помощью:

$dom = new DOMDocument;
$dom->load('http://www.example.com');

, когда в вашем PHP включен allow_url_fopen .

Но в основном для загрузки страницы может использоваться любая функция, которая поддерживает обертки потоков HTTP .

Answer 3

С библиотекой curl .

Answer 4

Просто добавить еще один вариант, потому что он есть, хотя не лучшим является просто использовать файл.Это еще один вариант, который я не вижу никого из перечисленных здесь.

$array = file("http://www.stackoverflow.com");

Хорошо, если вы хотите, чтобы он был в массиве строк, тогда как уже упоминавшийся file_get_contents поместит его в строку.

Еще одна вещь, которую вы можете сделать.

Затем вы можете циклически проходить по каждой строке, если это соответствует вашей цели:

foreach($array as $line){

    echo $line;
    // do other stuff here

}

Это иногда удобно, когда определенные API выдают простой текст или HTML с новой записью накаждая строка.

Answer 5

Вы можете использовать этот код

$url = 'your url';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
$data = curl_exec ($ch);
curl_close ($ch);
// you can do something with $data like explode(); or a preg match regex to get the exact information you need
//$data = strip_tags($data);
echo $data;