У меня вопрос, может ли googlebot отслеживать страницы, перенаправленные с помощью функции обмена...
У меня есть несколько вопросов, касающихся сканеров. Могу ли я создать сканер, который работает...
У меня небольшая проблема с ботом Google, у меня есть сервер, работающий на Windows Server 2009,...
У меня есть веб-сайт ASP.Net 3.5 с включенной аутентификацией форм. Возможно ли, чтобы робот...
Я бы хотел запретить /questions/{ID}/foo, но не /questions/{ID}. Синтаксис Disallow:...
В статистике моего веб-сайта я обнаружил, что сканер Google однажды сканировал мой веб-сайт, к...
У меня не так много волос, но я вытаскиваю то, что осталось немного. Мое приложение MVC3...
Я использую jQuery для извлечения контента из базы данных с помощью запроса json. Затем он заменяет...
Скажем, на сайте есть статья о спорте "Коби Брайант - лучший" 1) Имеет ли это значение для...
У нас есть страница, которая может опционально принимать идентификатор в качестве параметра GET....
Я создаю компонент для запрета IP-адресов спам-ботов на основе недопустимых запросов, которые они...
Я пытаюсь использовать селен, чтобы вызвать мою веб-страницу как googlebot.ниже мой код, но он...
Я настроил файл robots.txt, чтобы прекратить сканирование моего сайта в Google, так как он...
У меня есть два веб-сайта с различным контентом, один из которых написан на родном языке, а другой...
Я ищу чистый способ позволить паукам поисковой системы обходить @login_required, просматривая...
В настоящее время мы используем Kentico CMS для нашего веб-сайта, и у нас была страница с названием...
Я сделал $_SERVER['HTTP_ACCEPT_LANGUAGE'] на моем сайте, где есть два языка PL и EN. Я...
Есть ли что-нибудь, что я могу показать лайтбокс всем пользователям при загрузке страницы, но не...
У меня есть поисковая система на моем сайте, и она работает через ajax.Я хочу иметь конкретный...
Как настроить перенаправление, когда фотогалереи на сайте были обновлены? Некоторые фотографии были...
Я все еще не уверен, как это работает (но это не главное: D).Насколько я заметил, весь контент...
Чтобы веб-сайт ajax мог сканироваться с помощью googlebot, он требует, чтобы ваш веб-сайт отправлял...
в последние месяцы googleBot обращался к файлу, которого больше нет на моем сайте [index.php],...
У меня есть WS на основе JSON для моего веб-сайта, и я получаю непрерывные запросы от Google Bot на...
Я создаю сайт, который позволит продавцам: перечислять свои продукты на моем сайте иметь ссылку на...