Онлайн инструмент для сканирования веб-сайта и получения всей мета-информации для каждой страницы - PullRequest
0 голосов
/ 21 апреля 2009

Кто-нибудь знает о бесплатном онлайн-инструменте, который может сканировать любой веб-сайт и возвращать только мета-ключевые слова и мета-описание?

Ответы [ 2 ]

2 голосов
/ 29 апреля 2009

Если у вас есть доступ к Linux / Unix:

mkdir temp
cd temp
wget -r SITE_ADDRESS

Тогда для ключевых слов:

egrep -r -h 'meta[^>]+name="keywords' * | sed 's/^.*content="\([^"]*\)".*$/\1/g'

и для описания:

egrep -r -h 'meta[^>]+name="description' * | sed 's/^.*content="\([^"]*\)".*$/\1/g'

Если вам нужны все уникальные ключевые слова, попробуйте:

egrep -r -h 'meta[^>]+name="keywords' * | sed 's/^.*content="\([^"]*\)".*$/\1/g' | sed 's/\s*,\s*/\n/g' | sort | uniq

Я уверен, что есть одна строка или программа, которая делает именно эту вещь, и, безусловно, есть более простые ответы.

1 голос
/ 27 мая 2014

Для получения всей метаинформации попробуйте этот инструмент Анализатор метатегов

...