Как удалить сайт из Google или Яндекс?

В этой краткой инструкции мы рассмотрим как удалить отдельные URL адреса из поисковых систем - Google и Яндекс.

Зачем это нужно? Занимаясь продвижением веб-мастера обычно стремятся как можно быстрее отправить сайт на индексацию, но бывают случаи, когда требуется противоположное - когда требуется удалить сайт из поисковых систем Гугл и Яндекс. Это может понадобится в нескольких случаях, например, когда вы купили сайт и вам нужно удалить страницы из индекса, тоесть происходит полная замена сайта. Это делается, когда на сайте меняется дизайн и наполнение. Также удаление может понадобится, когда в поиск попали служебные страницы, тоесть те, которые не предназначены для общего просмотра. Подобное удаление делается для повышения уровня безопасности. Удаления также необходимо, если в индексе появились копии страниц сайта. Причин может быть много на самом деле. Но и способов для удаления есть несколько. 

Обязательно стоит отметить, что если вы удалите сайт из поисковых систем, это не означает, что он станет полностью недоступным в Интернете. Если ресурс был популярным и посещаемым, то очень высока вероятность, что у некоторых пользователей он добавлен в Избранное браузера, также он может вполне вероятно остаться по внешним ссылкам с других веб-ресурсов и соц. сетей. 

Но если вам нужно удалить сам сайт из поиска, то в этом случае понадобится удалить сайт из сервера или настроить ограниченный доступ, например, с вводом пароля. Также не забудьте, что нужно будет удалить битые ссылки. 

Основные шаги по удалению сайта из поисковой системы Яндекс

Временного удаления как такого в Яндексе нет, если нужно удалить сайт, то это навсегда. 

Удалить с сайта страницы, которым не нужна дальнейшая индексация. Если на ресурсе настроена 404 страница, то при повторном визите поискового бота страницы сайта должны пропасть из выдачи. Минус этого метода, что удаление сайта или страниц может затянуться, ведь необходимо дождаться перехода бота на ваш сайт. 

Также можно сделать настройку запрета индексации с использованием robots.txt. Хотя боты смогут попадать на эти страницы и с других сайтов, где были оставлены ссылки ранее. Поэтому данный метод не совсем действенный.   

Или примените “Удалить URL” в панели инструментов Яндекс.Вебмастер.

Основные шаги по удалению страниц сайта из Google

Для начала этого процесса вам нужен зарегистрированный аккаунт в Search Console в правами владения на сайт, которые подвержены и опубликованы. Есть 3 метода для удаления. 

# Удаление сайта на определенный период, например, на время проведения технических работ. Нужно сделать запрос в меню Удалить URl-адрес, как на скриншоте ⬇. 

Вам в предложенном поле ввода нужно будет ввести адрес страницы для скрытия или домен, в случае если нужно скрыть весь сайт. Далее следует выбрать один из вариантов удаления:

     -     спрятать временно страницу из выдачи и кэша (3 месяца);

     –    спрятать все страницы (3 месяца);

     –    очистить кэш поисковика от страниц сайта – отображение в выдачи остается, только обновляются данные в кэше поисковика.  

Не спешите проверять, так как данные запросы выполняются в течении 24 часов, в некоторых случаях дольше. 

Обратите внимание. 

Даже после удаления страницы из кэша или поиска, сканирование страниц со стороны поисковика продолжается (если она не заблокирована другими способом). Как только срок блокировки закончится отсканированная страница опять может начать отображаться в результатах выдачи.  Если бот не будет получать доступ к вашему УРЛ, он решит, что страница не существует, и после того, как вы откроете к ней доступ по тому же адресу, он посчитает ее новой и допустит в результаты поиска. 

# Удаление страниц сайта из индекса без возможности восстановления. 

В код мета-тега robots понадобится вставить указание с запретом на индексацию, которое выглядит так:

<meta name="robots" content="noindex">

Перед добавлением нужно проверить не закрыты ли страницы в robots.txt. 

# Сообщить об обнаружении неприемлемого содержания.

Это можно сделать, когда сайт не ваш, и вы хотите, чтобы его удалили из поиска Google. Неприемлемое содержание - это эротика, порно; нарушение закона или правил поисковой системы, нарушение авторского права. Сделать это можно по ссылке.

ВЫВОД,

Удаляйте из индекса прежде всего,  ненужные страницы, на которое вы не собираетесь привлекать посетителей.

Для этого используйте:

➡️ Запрет индексации noindex или использование Disallow;

➡️ 404 код ответа сервера;

➡️ Защита с помощью установки пароля;

➡️ С помощью функционала поисковиков. 

Преимущества и недостатки каждого из методов очевидны:
Используя Disallow вы показываете, что контент не нужно индексировать, но все же это не гарантированный метод, если на страницу есть ссылки с других источников. Поэтому проанализируйте данный момент перед установкой запрета.
Более эффективный метод - это защита с помощью пароля, но она может создать трудности у пользователей. 
С помощью специального функционала поисковых систем действительно можно быстро удалить ненужные страницы, но во время следующей индексации они будут отображаться в выдачи. 
Итак, Noindex + 404 помогут удалить лишние страницы из индекса. Noindex добавьте на каждую страницу в метатеге и HTTP-заголовке X-Robots-Tag, которую вы хотите исключить. 
Надеюсь, данная инструкция помогла вам разобратся с удалением вашего сайта из популярных поисковых систем!