Сохранение веб-страниц в localbox - PullRequest
0 голосов
/ 21 июля 2011

Есть ли способ загрузить все первые посещения веб-страницы в мой локальный ящик, и все последующие посещения будут получать данные из локального ящика, а не из Интернета?То есть, как служба работает на порту, и если я получаю доступ к этому порту, а не к порту HTTP, я получаю данные из локального ящика?

Мне нужно использовать эту службу для анализа веб-страниц, содержимое которых может изменитьсякаждый раз, чтобы я мог работать с одним и тем же контентом.

Ответы [ 3 ]

2 голосов
/ 21 июля 2011

Вы можете использовать кеширующий прокси, например squid .

Служба squid хранит веб-страницы локально, и следующие запросы возвращают сохраненный файл.

0 голосов
/ 21 июля 2011

Мне нужно использовать этот сервис для разбора веб-страниц, содержание которых может измениться

Посмотрите на двигатель паука, например, Павук.

0 голосов
/ 21 июля 2011

Похоже, вы говорите о прокси-сервере

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...