Удаление полного сайта из индекса Google - PullRequest
1 голос
/ 16 мая 2011

Мой URL: http://LawMirror.com - (Онлайн юридические ресурсы)

Я хочу удалить содержимое из индекса Google. Индекс Google включает в себя мои сайты. Огромное количество страниц, проиндексированных в индексе Google, около 5 000 000 страниц ранее, а теперь осталось 3 025 000 страниц. Мой URL: http://LawMirror.com - (Онлайн юридические ресурсы)

Я хочу удалить содержимое из индекса Google. Индекс Google включает в себя мои сайты. Огромное количество страниц, проиндексированных в индексе Google, около 5 000 000 страниц ранее, а теперь осталось 3 025 000 страниц.

Я сделал следующие вещи, но удаление страниц идет очень медленно.

Robots.txt

User-agent: * Disallow: /

.htaccess

rewriteengine on
rewritecond %{HTTP_USER_AGENT} ^.*Googlebot/2.1.*$
rewriterule .* - [G]

Содержимое, возвращаемое роботу Google, когда он пытается сканировать содержимое

HTTP / 1.1 410 Gone Дата: сб, 05 января 2013 12:39:23 GMT Сервер: Apache / 2.2.23 (Unix) mod_ssl / 2.2.23 OpenSSL / 0.9.8e-fips-rhel5 mod_fastcgi / 2.4.6 mod_jk / 1.2.37 mod_auth_passthrough / 2.1 mod_bwlimited / 1.4 FrontPage / 5.0.2.2635 PHP / 5.3.19 Длина содержимого: 661 Подключение: закрыть Content-Type: text / html; кодировка = изо-8859-1

Я также использовал метатег html noindex, без подписки, но без эффекта:

Я также отправил запрос на удаление сайта, но скорость удаления содержимого очень низкая. За последние 35 дней только несколько страниц были удалены. Мой сайт также удален из поискового индекса Google, но Google Webmasters - Здоровье -> Статус индекса по-прежнему показывает 3 025 000 страниц, и если я повторно отправлю сайт, они покажут уже проиндексированные страницы. Как я могу увеличить скорость удаления страниц.

Это контент, возвращаемый Googlebot, когда он пытается сканировать контент

HTTP/1.1 410 Gone
Date: Sat, 05 Jan 2013 12:39:23 GMT
Server: Apache/2.2.23 (Unix) mod_ssl/2.2.23 OpenSSL/0.9.8e-fips-rhel5 mod_fastcgi/2.4.6 mod_jk/1.2.37 mod_auth_passthrough/2.1 mod_bwlimited/1.4 FrontPage/5.0.2.2635 PHP/5.3.19
Content-Length: 661
Connection: close
Content-Type: text/html; charset=iso-8859-1

Я также использовал метатег html noindex, без подписки, но без эффекта:

<meta name="googlebot" content="noindex,nofollow">

Я также отправил запрос на удаление сайта, но скорость удаления содержимого очень низкая. За последние 35 дней только несколько страниц были удалены. Мой сайт также удален из поискового индекса Google, но Google Webmasters - Здоровье -> Статус индекса по-прежнему показывает 3 025 000 страниц, и если я повторно отправлю сайт, они покажут уже проиндексированные страницы. Как я могу увеличить скорость удаления страниц.

1 Ответ

0 голосов
/ 09 сентября 2015

Одно из решений - возвращать 410 при каждом запросе страницы.Это ускорит деиндексирование.Убедитесь, что в вашем robots.txt.

нет заблокированных страниц.
...