Как автоматически извлекать контент с других сайтов?

Question

Я хочу извлечь конкретные данные с веб-сайта из его страниц ...

Я не хочу получать все содержимое конкретной страницы, но мне нужна только некоторая часть (данные могут быть только внутриtable или content_div), и я хочу сделать это несколько раз на всех страницах веб-сайта ..

Как я могу это сделать?

Answer 1

«извлечение контента из других веб-сайтов» называется очисткой экрана или очисткой веб-страниц .

простой html dom-парсер - это самый простой (я знаю) способ сделать это.

Answer 2

Используйте curl для получения содержимого и xPath для выбора отдельных элементов.

Знайте об авторских правах.

Answer 3

Я думаю, вам нужно реализовать что-то вроде паука. Вы можете сделать запрос XMLHTTP и получить содержимое, а затем выполнить анализ.

Answer 4

Есть способы сделать это. Просто для развлечения я создал приложение для Windows, которое просматривало мой аккаунт в известной социальной сети, просматривало правильные места и записывало информацию в XML-файл. Эта информация будет затем импортирована в другое место. Однако такого рода приложения можно использовать по мотивам, с которыми я не согласен, поэтому я никогда не загружал это.

Я бы рекомендовал использовать RSS-каналы для извлечения контента.

Answer 5

Вам нужен php crawler . Ключ должен использовать функции манипуляции со строками, такие как strstr, strpos и substr.