Как удалить с сайта устаревший контент

Если ресурс существует достаточно долгое время, всегда есть вероятность, что содержание некоторых его страниц в определенный момент потеряет актуальность. Причины часто зависят от направленности сайта: например, в интернет-магазине закончилась акция на один из товаров или статья инфопортала о настройке приложения больше не может помочь пользователям из-за выхода масштабного обновления. Иногда бывает достаточно обновить данные на странице, однако в некоторых случаях ограничиться этим не получится. Сегодня мы расскажем о способах, которые оградят пользователя от просмотра неактуальной информации. Вы узнаете, как исключить старую страницу из индекса поисковых систем или полностью удалить с сайта, а также что нужно делать, если сторонние ресурсы содержат устаревшие данные о вас или вашем бизнесе.

Почему важно своевременно удалять неактуальную информацию с сайта?

Данные, которые уже не соответствуют действительности, вводят пользователя в заблуждение. Это чревато разными последствиями: от распространения ложной, но безобидной информации до получения пользователем негативного опыта. Частые подобные случаи способны привести к тому, что люди потеряют доверие к ресурсу. Ведь чем больше на сайте неактуальной информации, тем выше вероятность, что это заметят посетители. Многие из них перестанут надолго задерживаться на страницах, что приведет к росту отказов и снижению позиции в поисковой выдаче. Также важно помнить о том, что если на сайте будет скапливаться большое количество устаревших страниц, поисковые роботы просто не успеют просканировать и добавить в индекс новые и актуальные. Да и об изменениях в законодательстве забывать не стоит: если вовремя не удалить информацию, которую признали запрещенной, можно столкнуться с крайне неприятными последствиями.

Что же делать, если на сайте есть страницы с устаревшим контентом?

Как уже было сказано выше, игнорировать неактуальные страницы строго не рекомендуется. Далее мы рассмотрим основные способы, позволяющие сделать так, чтобы подобные страницы не нанесли вред сайту и его пользователям.

Полное удаление страницы

Применяется в том случае, если с ней уже ничего нельзя сделать. Перед удалением важно провести следующие действия:

  • Проверить, есть ли на вашем сайте ссылки, которые ведут на эту страницу. Если такие существуют, их нужно удалить либо заменить.
  • Отредактировать файл sitemap.xml так, чтобы в нем больше не было ссылок на страницу, которая готовится к удалению. Загрузить обновленный файл на сервер можно через корневую папку сайта или с помощью Яндекс.Вебмастера. Также важно указать в файле robots.txt ссылку на обновленный sitemap.xml.
  • Убедиться, что на страницу, которая будет удалена, не ведут ссылки со сторонних ресурсов. Если такие есть, попросите владельцев убрать их.

Теперь можно переходить непосредственно к удалению страницы. Воспользуйтесь одним из двух способов:

  • Найдите на сервере HTML‑файл страницы и удалите его.
  • Воспользуйтесь панелью управления хостингом или админкой CMS. Они позволят быстро найти и удалить старую страницу сайта.

Удаление страницы из индекса поисковых систем

Иногда более разумным решением будет не полное удаление страницы, а проведение на ней определенных работ, в ходе которых администраторы обновят контент. Однако данные работы могут занять некоторое время — и на этот период рекомендуется удалить страницу из индекса поисковых систем. Сама страница останется на сайте, но не будет показываться по запросам, которые пользователи введут в поисковую строку Яндекса или Google.

Удаление из индекса осуществляется следующими способами:

  • Через редактирование файла robots.txt, который создается специально для роботов поисковых систем и оптимизирует процесс краулинга. В данном файле вы можете задать правило, в соответствии с которым робот не будет включать в индекс определенную страницу. Для этого нужно после названия User‑Agent указать директиву Disallow с полным относительным адресом страницы, перед которым будет стоять /. Например, так:
    User‑agent: Yandex
    Disallow: /ru/page
  • С помощью добавления на страницу метатега noindex. Его нужно разместить в разделе следующим образом:
    <meta name="robots" content="noindex">
    Не стоит переживать, если сразу после добавления метатега страница будет отображаться на поиске. Через некоторое время робот считает метатег и перестанет ее индексировать.
  • Через Яндекс.Вебмастер или Google Search Console. Данные сервисы помогают всего в пару кликов удалить страницу из поисковой выдачи. Достаточно только перейти в окно нужного инструмента и ввести адрес. Однако этот способ стоит сочетать с одним из указанных выше, чтобы поисковый робот не вернул страницу в индекс.

После проведения указанных действий мы рекомендуем проверить, отображается ли страница на поиске. Для этого вначале перейдите в раздел «Страницы в поиске» Яндекс.Вебмастера, где ведется лог всех изменений, связанных с положением страниц сайта в выдаче поисковых систем. Там должна появиться запись о том, что нужная страница удалена из поисковой выдачи. Если такого сообщения пока нет, стоит немного подождать. После его появления перейдите на поиск и попробуйте ввести запросы, по которым страница показывалась раньше. Если она больше не появляется в выдаче, удаление из индекса прошло успешно.

photo
Читайте также:
Поисковый робот: общие принципы работы и методы управления


Редактирование контента страницы

После того как страница перестанет показываться в поисковой выдаче, владельцы сайта могут удалить ее или отредактировать. Оставлять страницу без изменений не стоит — у пользователей могли сохраниться ссылки на нее, которые при отсутствии изменений дадут доступ к неактуальному контенту. Удаление тоже не всегда является разумной идеей — есть вероятность, что страница имела хорошие показатели посещаемости и генерировала качественный трафик. К счастью, есть несколько способов, позволяющих избежать полного удаления:

  • Изменение контента. Вы можете, например, актуализировать текст, размещенный на странице. При этом важно указать дату внесения правок, чтобы пользователи не сомневались в том, что сведения из статьи обновлены.
  • Установка редиректа 301 (или 302), позволяющего автоматически перенаправлять пользователя с устаревшей страницы на актуальную. Пользователь не увидит содержание устаревшей страницы — перед ним сразу откроется новая. Редиректы работают примерно одинаково, отличие только в том, что 301 носит постоянный характер, а 302 — временный.
  • Использование “заглушки” — картинки или сообщения о том, что информация на данной странице устарела и пользователю нужно перейти на другую. Однако если “заглушка” будет сделана недостаточно грамотно, вырастет процент отказов. Поэтому редирект все же предпочтительнее.
  • Применение специального скрипта, обновляющего информацию автоматически. Этот способ подойдет, если на странице содержатся котировки акций, курсы валют, прогноз погоды или другая числовая информация, которая быстро теряет актуальность и нуждается в частых обновлениях.

Что делать, если устарела информация о вашем ресурсе, опубликованная на стороннем сайте?

В этом случае вы уже не сможете самостоятельно отредактировать или удалить страницу. Однако не стоит оставлять все как есть: наличие устаревшей информации в свободном доступе способно привести к возникновению негативных факторов самого разного рода, от падения трафика до юридических последствий. Могут пострадать обе стороны — и ваш сайт, и ресурс, разместивший неактуальную информацию. Поэтому важно следить, чтобы данные о вас на других сайтах соответствовали действительности. Если же вы заметите неточности, следует как можно быстрее принять меры:

  • Обратитесь напрямую к владельцам ресурса и разъясните ситуацию. Для этого лучше всего подойдет электронная почта — обычно ее адрес находится в разделе с контактными данными. Вежливо и без предъявления претензий сообщите в письме, что определенная информация о вас, содержащаяся на сайте, устарела и ее следует заменить на новую. Оформите письмо в соответствии с основными правилами вежливой переписки — начните с обращения и завершите своей подписью. Это произведет благоприятное впечатление на получателя и поспособствует решению вопроса в вашу пользу.
  • Если договориться с владельцем сайта по какой-либо причине не получилось, попробуйте удалить страницу из индекса поисковых систем с помощью Яндекс.Вебмастера или Google Search Console. Достаточно выполнить те же шаги, что и для страницы своего сайта: зайти в нужный раздел и ввести URL. Однако данный способ нужно применять с осторожностью — владелец сайта может не одобрить удаление своей страницы из индекса, что приведет к конфликту. Поэтому лучше всего в первую очередь постараться договориться о редактировании контента с его стороны.

Конечно, ситуации, когда необходимо скорректировать весь контент страницы или его часть, могут быть самыми разными — в некоторых случаях потребуется сочетание нескольких указанных нами методов. Однако, как мы видим, полное удаление страницы далеко не всегда является оптимальным решением. Если она приносила хороший трафик, лучше скорректировать содержание или настроить редирект. Тогда все останутся только в плюсе — ваш сайт не просядет в выдаче по запросам, которые приводят на эту страницу, а пользователи получат актуальную и полезную информацию.