Роботы ползают фреймы?

Question

Роботы часто ползают внутри фреймов? И как они это делают? Они индексируют его мгновенно или просто «запоминают» URL и продолжают иногда позже?

Answer 1

Ифрамы легко сканируются, как указали другие. Однако я хотел уточнить, что ваша страница не получит "кредит" за содержание в фрейме. Таким образом, ваша страница на самом деле не будет проиндексирована как содержащая контент - это всего лишь ступенька для сканера для индексации страницы в фрейме и прямой ссылки на нее. Это важно понять, если iframe указывает на контент, который не находится в вашем домене, и вы ожидаете использовать содержимое iframe для видимости своей страницы. Не знаю из вашего вопроса, действительно ли это ваше намерение.

Answer 2

Если где-то есть ссылка href / src на индексированной проиндексированной (т.е. сканированной ) HTML / XHTML странице, она будет проиндексирована. Является ли страница представленной пользователю через iFrame, не имеет значения.

Answer 3

я бы так себе представил; Я знаю, что Googlebot делает.

Если вы сомневаетесь, вы можете контролировать вещи с помощью robots.txt и нескольких дополнительных ссылок в нижнем колонтитуле вашей страницы. Посмотрите на ссылки внизу этой страницы, например.

Answer 4

iframe просто содержит HTML-контент, как и любая другая HTML-страница.
Так что да, боты-двигатели будут их сканировать.

И вы, вероятно, хотите, чтобы они сканировали их, вероятно, там, где находится ваш контент.
Однако вы, вероятно, не хотите, чтобы пользователи обращались к вашему веб-сайту прямо в рамке.

Так что вы можете обнаружить отсутствие кадра. Таким образом, вы будете использовать javascript, чтобы добавить их, которых не существует.

<script type="text/javascript">
    if (top.frames.length==’0′) {
        window.location.replace("Appropriate url with frames");
    }
</script>

В качестве последнего комментария я бы порекомендовал вам не использовать фреймы . Они настоятельно не рекомендуются, поскольку они абсолютно против любой политики доступности.
Они делают ваш сайт не имеющим никакого контента на главной странице. Так что это явно не помогает вашему рейтингу.

Если вы можете избежать их, сделайте это (и вы всегда можете).