Содержание:
- Когда такие меры необходимы?
- Как удалить сайт или его отдельные страницы из поисковой выдачи «Гугла»
- Как удалить сайт или страницу из выдачи «Яндекса»
Если ваш сайт отображается на поиске и имеет высокую позицию, велик шанс, что его заметят и посетят пользователи из целевой аудитории. Однако важно внимательно следить, какие именно разделы они увидят, когда вобьют в поисковике важные для вас запросы. Иногда в выдачу «Яндекса» и Google попадают страницы, посещение которых негативно сказывается на пользовательском опыте и приводит к ухудшениям показателей ресурса. В этом случае стоит как можно скорее воспользоваться инструментами, помогающими удалить сайт или его отдельные страницы из индекса поисковой системы.
Когда такие меры необходимы?
Варианты ситуаций могут быть разными — например, сайт перестал работать или его перенесли на другой домен. Конечно, установка редиректа на новую версию тоже поможет, однако прекращение индексации считается более надежным способом убрать из поиска ресурс, который уже не актуален. Кроме того, индексацию стоит отключить, когда на сайте идут технические работы и часть контента отображается некорректно.
Отдельные страницы ресурса, который продолжает исправно работать, также иногда следует убирать из поиска. Например, если они:
- Имеют дубли. Важно проследить, чтобы копии уже показывающихся на поиске страниц не попадали в индекс.
- Потеряли актуальность. Это происходит, когда рекламная акция, условия которой отображались на странице, закончилась.
- Представляют собой ссылки на файлы и каталоги, которые входят в состав архитектуры сайта. Пользователям их видеть ни к чему.
- Содержат информацию, которую должны видеть только администраторы. Если подобные данные находятся в свободном доступе, это может стать угрозой для безопасности всего ресурса.
- Стали пустыми. Такое случается, когда товара страницы больше нет в каталоге интернет-магазина.
Если удалить все подобные ссылки из индекса, показатели сайта улучшатся, а его страницы с актуальным контентом получат более высокие позиции на поиске. Однако стоит учесть, что для «Яндекса» и Google алгоритмы выведения страниц из индекса будут отличаться.
Как удалить сайт или его отдельные страницы из поисковой выдачи «Гугла>»
Наиболее простой способ подойдет, если нужно провести технические работы и изменить контент — Google позволяет убрать ссылку на страницу или сайт из поиска на срок до 180 дней. При этом поисковые роботы все равно будут ее периодически просматривать. Так сделано для вашего удобства — когда робот обнаружит новый контент, он автоматически вернет ссылку в выдачу. Однако функцией приостановки показа нужно пользоваться аккуратно — если робот найдет ошибку 404 («не найдено»), 502 («ошибка шлюза») или 503 («сервис временно недоступен»), ссылка будет бессрочно удалена из поиска.
Чтобы приостановить показ вашего сайта или его отдельных страниц в выдаче Google, воспользуйтесь следующим алгоритмом.
- Найдите в Google Search Console инструмент, позволяющий убирать URL из поиска, и выберите в нем вкладку «Временное удаление».
- В этой вкладке нажмите на «Создать запрос», выберите «Временное удаление URL» или «Удаление кэшированной копии страницы», а затем — «Далее». Теперь осталось только подтвердить свой запрос на временное удаление адреса из поиска.
Подобная заявка рассматривается в течение суток, а вы можете при необходимости отозвать ее через Search Console. Google имеет право как одобрить, так и отклонить заявку — во втором случае будет указана причина. После одобрения стоит проверить поисковую выдачу, так как в ней иногда остаются другие варианты временно заблокированного URL. Для них потребуются отдельные запросы на удаление.
Если же вы хотите полностью убрать сайт или страницу из индекса, воспользуйтесь одним из следующих методов:
- Удалите весь контент со страниц и убедитесь, что у них статус HTTP 404 («объект не найден») или 410 («объект удален»).
- Установите пароль, чтобы никто не смог получить доступ к контенту;
- Примените noindex в виде тега <meta> или заголовка HTTP‑ответа. Важно, чтобы в robots.txt не было команды disallow.
Следует также помнить, что поисковые роботы «Гугла» не распознают команду noindex, которая может содержаться в файле robots.txt.
Статус ссылки на страницу или сайт отображается в Google Search Console, и, когда она будет выведена из индекса, вы получите соответствующее сообщение. Обычно на этот процесс уходит до семи дней.
Как удалить сайт или страницу из выдачи «Яндекса»
Чтобы на поиске не показывалась определенная страница, которую вы не собираетесь удалять, будет достаточно разместить в ее коде метатег robots с директивой noindex. Поисковый робот считает его и уберет страницу из индекса. Если вам потребуется вернуть ее обратно, удалите метатег с noindex
Следующий способ предназначен, наоборот, для страниц, которые больше не нужны. Внесите в файл robots.txt директиву Disallow, а затем настройте через сервер HTTP‑статус 404, 403 («доступ запрещен»), 410 или 301 («объект перемещен навсегда») в сочетании с редиректом. Удаление из индекса произойдет в течение недели, однако такой процесс можно ускорить, если воспользоваться специальным инструментом Яндекс.Вебмастера. Потребуется выбрать вкладку «Удаление страниц из поиска», ввести нужный адрес и нажать на кнопку «Удалить». С помощью этого инструмента также получится убрать из индекса несколько страниц одновременно, если у вас есть подтвержденные права управления сайтом. Достаточно в переключателе условий выбрать режим «По префиксу» и добавить соответствующие значения. В сутки можно задать такую команду не более чем для 20 префиксов. После нажатия кнопки «Удалить» система получит команду о выведении из индекса страниц с ними.
Если вы воспользовались инструментом Удаление страниц из поиска, вебмастер будет уведомлять об их текущем статусе. Возможны следующие варианты:
- «В очереди на удаление». Система проверяет, есть ли на странице директива Disallow. Без нее удаление не осуществится.
- «В процессе». Нужные условия соблюдены и в течение суток страница будет удалена.
- «Отклонено». Какие-либо условия не выполнены — например, нет нужной директивы или статус страницы отличается от 404, 403 и 410.
- «Удалена». Процесс выведения из индекса завершился успешно.
После применения этого инструмента страницу также можно вернуть на поиск. Для этого потребуется убрать из кода директиву Disallow.
