Использование инструмента для удаления URL в Google Search Console

Инструмент удаления URL в Google Search Console позволяет:

• Временно удалить URL-адреса из результатов поиска Google,
• Очистить кешированные URL-адреса и
• Просматривайте историю своих страниц, отмеченных пользователями Google как устаревшие или предназначенные для взрослых.

Инструмент удаления URL-адресов предлагает временное решение для удаления URL-адресов из поиска Google. Он не удаляет URL-адреса из индекса Google, но дает вам некоторое время, чтобы найти постоянное решение.

Из-за того, как быстро работает инструмент (страницы удаляются примерно через 24 часа), он может быть спасением, когда вам нужно как можно скорее удалить страницу из поисковой выдачи. Однако даже небольшая ошибка может привести к случайной блокировке важных страниц и повлиять на вашу видимость в органическом поиске.

В этой статье объясняется, как и когда использовать инструмент удаления URL-адресов на благо вашего веб-сайта.

Когда использовать инструмент удаления URL

Инструмент удаления URL удобен, когда:

• Вам нужно срочно удалить страницу. Инструмент удаления URL удаляет страницу из результатов поиска примерно за 24 часа. Поэтому вы можете использовать его в ситуации, когда, например, вы разместили конфиденциальную информацию по ошибке, или ваш сайт был взломан, и вы хотите немедленно удалить страницы из поиска.
• Вы хотите удалить большое количество страниц. Google может потребоваться некоторое время, чтобы просканировать большое количество страниц и заметить, что вы, например, добавили метатег noindex (тег HTML, указывающий, что вы не хотите индексировать страницу). Вы можете быстро удалить эти страницы с помощью инструмента для удаления URL, не дожидаясь, пока Google просканирует их.

• Вы изменили свой контент и не хотите, чтобы устаревшая информация отображалась во фрагменте описания. Инструмент удаления URL-адресов позволяет очищать кешированные URL-адреса, что удаляет фрагмент описания до тех пор, пока страницы не будут снова просканированы.

• У вас нет доступа к коду или серверу вашего сайта. Инструмент удаления URL позволяет легко удалить страницу в Google Search Console без необходимости писать код или настраивать сервер.

• Вы хотите отслеживать, не были ли какие-либо из ваших страниц отмечены как устаревшие или только для взрослых. В инструменте удаления URL вы можете увидеть, запрашивал ли кто-то удаление ваших страниц, и действовать быстро, например, обновить ваш контент.

Как использовать инструмент удаления URL

Вы можете получить доступ к инструменту удаления URL-адресов в Google Search Console, щелкнув параметр «Удаление» на боковой панели.

Инструмент удаления URL разделен на три раздела:

• временное удаление,
• Устаревший контент,
• Фильтрация безопасного поиска.

Раздел «Временные удаления»

В разделе «Временное удаление» вы можете:

• Временно удалить URL-адреса,
• Очистить кешированные URL-адреса и
• Просматривайте историю ваших запросов на удаление за последние шесть месяцев.

Временно удалить URL-адрес

Параметр «Временно удалить URL» удаляет вашу страницу из результатов поиска Google на шесть месяцев.

Имейте в виду, что Google не удаляет эту страницу из своего индекса. Для удаления страницы из индекса необходимо реализовать дополнительные методы, например, метатег noindex. В противном случае страница может автоматически снова появиться в результатах поиска через полгода.

Кроме того, Google продолжает сканировать удаленные страницы. Чтобы заблокировать доступ, вам нужно добавить директиву disallow в robots.txt, текстовый файл, указывающий, какие страницы поисковые роботы могут и не могут сканировать.

Очистить кешированный URL-адрес

Параметр «Очистить кэшированный URL» удаляет фрагмент описания страницы из результатов поиска Google до тех пор, пока страница не будет снова просканирована. До тех пор фрагмент описания говорит: «Нет доступного описания страницы».

Как указать URL-адрес в инструменте удаления URL-адресов

Раздел «Временное удаление» позволяет удалить:

• индивидуальный URL-адрес,
• Группа URL-адресов с одинаковым префиксом.

При блокировке отдельного URL -адреса вам необходимо ввести точный URL-адрес , который отображается в результатах поиска — такие варианты, как example.com/page и example.com/Page, рассматриваются как два разных URL-адреса.

Однако инструмент удаления URL-адресов влияет на все варианты, такие как www/non-www и HTTP/HTTPS. Вот почему вы не должны использовать этот инструмент, чтобы указать, какая версия вашего URL-адреса должна отображаться в результатах поиска. Если вы хотите удалить только одну версию, вам следует использовать методы канонизации, например, тег canonical (HTML-тег, указывающий, какая страница является главной, когда существует более одной версии).

Если вы хотите заблокировать несколько URL-адресов, вам необходимо определить их префикс. Например, если вы укажете «блог/», все URL внутри этого каталога будут удалены (блог/страница1, блог/страница2 и т. д.).

Вы должны быть особенно осторожны при одновременном удалении нескольких URL -адресов , чтобы избежать ошибочного удаления ценной страницы. Дважды проверьте, есть ли какие-либо важные страницы с префиксом, который вы планируете удалить, и отслеживайте возможные падения органического трафика после использования инструмента.

История запросов на удаление

Вы можете просмотреть историю ваших запросов на удаление, сделанных за последние шесть месяцев. Он показывает тип и дату вашего запроса, а также его текущий статус.

Ваш запрос может иметь один из пяти следующих статусов:

• Обработка запроса. Обычно Google удаляет URL-адрес в течение дня.
• Запрос отклонен — ваш запрос может быть отклонен, если страница не проиндексирована или выполняется другой идентичный запрос.
• Запрос отменен — вы отменили запрос, и страница должна снова появиться в результатах поиска.
• Временно удалено — ваш запрос был одобрен, и Google удалил URL-адрес из результатов поиска.
• Удаление просрочено – срок действия вашего запроса истек, и страница может снова появиться в результатах поиска.
• Очищено — Google очистил кешированный URL.

Как отменить запрос

Через шесть месяцев после запроса страница должна автоматически снова появиться в результатах поиска.

Однако инструмент удаления URL позволяет отменить запрос раньше. Для этого вам необходимо:

1. Откройте раздел URL-адрес временного удаления.
2. Нажмите кнопку меню рядом с запросом, который вы хотите отменить.
3. Выберите опцию «Отменить запрос».

И это все! Вскоре страница снова появится в Google Поиске.

Однако официальной информации о том, сколько времени требуется Google для отмены запроса, нет. В одном из своих твитов Джон Мюллер упомянул, что запросы «обрабатываются довольно быстро».

Отмена запроса на удаление обычно обрабатывается довольно быстро, и похоже, что сайт вернулся, здорово!

— Джон (@JohnMu) 17 января 2019 г.

Я решил проверить, что именно означает «довольно быстро».

Чтобы проверить, сколько времени занимает отмена запроса, я выполнил следующие шаги:

1. Я использовал инструмент удаления URL, чтобы удалить три наши страницы из результатов поиска.
2. Я ждал, пока Google удалит эти страницы из результатов поиска.
3. После того, как Google одобрил мои запросы, я использовал опцию «Отменить запрос» и следил за тем, сколько времени ушло на его обработку.

Оказалось, что все три страницы вернулись в результаты поиска менее чем за 4 часа!

Как сделать удаление постоянным

Инструмент удаления URL предоставляет только временное решение. Чтобы навсегда удалить URL-адрес, вы можете:

Добавьте метатег noindex

Метатег noindex указывает, что вы не хотите индексировать определенную страницу. Боты поисковых систем обнаруживают тег noindex при сканировании страницы, и если они соблюдают его, они не будут его индексировать. Страница останется доступной на вашем сайте как для роботов поисковых систем, так и для пользователей, но не будет отображаться в результатах поиска.

Настройте код состояния HTTP 404/410.

Установка кода состояния HTTP 404 (не найдено) или 410 (исчезло) удаляет страницу с вашего сайта. В результате боты поисковых систем и пользователи не смогут получить доступ к вашей странице.

Добавить пароль

Боты поисковых систем не могут получить доступ к странице, если она защищена паролем. Это хорошее решение, если вы хотите защитить конфиденциальную информацию на своей странице.

Раздел «Устаревший контент»

Раздел «Устаревший контент» показывает, когда кто-то сообщает о вашем контенте как об устаревшем с помощью инструмента «Удалить устаревший контент».  

Google рекомендует использовать инструмент «Удалить устаревшее содержимое », когда страница больше не существует или владелец удалил критически важный контент. Пользователи Google могут запросить один из двух типов удаления:

• Удаление устаревшей страницы — используется, когда страница больше не существует. Если запрос выполнен успешно, Google удалит страницу из своего индекса.
• Удаление устаревшего кеша — используется, когда страница существует, но некоторый контент был удален. Если запрос выполнен успешно, Google больше не будет показывать страницу по запросам, связанным с удаленным контентом.

Если кто-то сообщает, что ваш контент устарел, вы можете отслеживать статус запроса в инструменте удаления URL. Есть семь возможных статуй:

• Утверждено — запрос пользователя был выполнен успешно, и ваша страница будет удалена из индекса, либо Google больше не будет показывать ее по запросам, связанным с удаленным контентом.
• Запрещено: Контент все еще находится на странице. Google не будет предпринимать никаких действий в отношении вашей страницы, поскольку указанный контент все еще находится на странице.
• Запрещено: устаревшее содержимое не включено в индекс — заявленное содержимое отсутствует в проиндексированной версии. Возможно, вы уже удалили его или пользователь ввел неверный контент.
• Запрещено: страница не проиндексирована — страница, о которой сообщил пользователь, не проиндексирована.
• Запрещено: страница не удалена — страница, о которой сообщил пользователь, все еще существует.
• Отклонено: Дублированный запрос — такой же запрос уже обрабатывается.
• Denied: Unspecified – запрос пользователя был отклонен по другим неуказанным причинам.

Вы не можете предпринять какие-либо прямые действия в инструменте удаления URL, чтобы остановить процесс. Тем не менее, все же стоит следить за запросами. Если часть вашего контента действительно устарела, вы можете принять меры, например, обновить его или удалить с вашего веб-сайта.

Раздел «Фильтрация безопасного поиска»

Пользователи, у которых включен фильтр безопасного поиска, не видят страницы, предназначенные только для взрослых. Однако, если они считают, что какая-то страница прошла через фильтр, они могут сообщить об этом в инструменте подсказок SafeSearch.  

В разделе SafeSearch Filtering вы можете увидеть историю запросов пользователей и статус каждого запроса:

• Обработка запроса — Google обрабатывает запрос,
• Запрос отменен — пользователи самостоятельно отменили запрос,
• Запрос отклонен: Google решил, что контент не должен рассматриваться как предназначенный только для взрослых.
• Отфильтровано — Google утвердил запрос и не будет показывать страницу пользователям, использующим фильтр безопасного поиска.

Если запрос был одобрен, но вы считаете его неверным, вы можете сообщить об этом на форуме для веб-мастеров.

Резюме

Я надеюсь, что после прочтения статьи вы знаете, как и когда использовать инструмент для удаления URL. Вот основные выводы, которые следует учитывать при использовании инструмента:

• Инструмент удаления URL не деиндексирует страницу. Он просто удаляет его из результатов поиска Google на шесть месяцев,
• Google продолжает сканировать страницы, удаленные с помощью инструмента для удаления URL. Если вы хотите запретить его сканирование, вам нужно запретить сканирование в robots.txt,
• Инструмент удаления URL-адресов удаляет версии с www/без www и HTTP/HTTPS из результатов поиска,
• Чтобы удалить страницу навсегда, вам нужно реализовать дополнительные методы, например, метатег noindex, код состояния HTTP 404/410 или добавить пароль,
• Если вы хотите удалить более одного URL-адреса, дважды проверьте все URL-адреса, которые будут затронуты, чтобы предотвратить случайное удаление важной страницы.
• Регулярный мониторинг разделов «Устаревшее содержимое» и «Фильтрация безопасного поиска» позволяет вам быстро принять меры, если о какой-либо из ваших страниц поступило сообщение (например, обновить содержимое или сообщить об этом, если вы считаете, что запрос был неверным).