Инструмент удаления URL

Как временно удалить свои страницы из Google и посмотреть результаты, отфильтрованные Безопасным поиском

Инструмент удаления URL позволяет владельцу сайта временно исключить некоторые страницы из результатов поиска Google, а также посмотреть, кто из владельцев и других пользователей ресурса подавал запросы на удаление раньше и на какие страницы сайта жаловались из-за наличия контента для взрослых.

Если вам нужно скрыть в Google Поиске материалы с сайта, который вам не принадлежит, прочитайте эту статью.

Учебный курс по Google Search Console: инструменты Search Console для удаления контента

 

Как временно заблокировать URL собственного сайта

Ниже описано, как скрыть тот или иной URL своего сайта в результатах поиска Google.

В каких случаях использовать инструмент удаления URL

  • Вы хотите быстро заблокировать показ в Google Поиске какого-либо URL, относящегося к вашему ресурсу в Search Console. Это может быть URL веб-страницы или изображения. Если же вам нужно навсегда удалить URL из Google Поиска, понадобится выполнить дополнительные действия.
  • Вы удалили со страницы неуместную или конфиденциальную информацию и хотите, чтобы изменения были отражены в результатах поиска Google.

В каких случаях не следует использовать инструмент удаления URL

  • Вы хотите заблокировать страницу ресурса, который вам не принадлежит. Ознакомьтесь с информацией, приведенной в разделе Страница вам не принадлежит.
  • Вам нужно навсегда удалить свой URL из Google Поиска. Для этого потребуются дополнительные действия, использовать только инструмент удаления URL будет недостаточно.
  • Вы решили удалить какой-либо контент из Интернета. Этот инструмент позволяет блокировать материалы только в Google Поиске.
  • Вам нужно, чтобы ваш контент перестал показываться в других поисковых системах. Этот инструмент позволяет блокировать материалы только в Google Поиске.
  • Вы хотите удалить из результатов поиска ставший ненужным контент, например старые страницы, на которых пользователи видят сообщение об ошибке 404. Если вы изменили структуру своего сайта и некоторые URL в индексе Google устарели, поисковые роботы обнаружат это и повторно просканируют их, а старые страницы постепенно будут исключены из результатов поиска. Нет необходимости отправлять запрос, требующий срочного исполнения.
  • Вы решили устранить ошибки сканирования в своем аккаунте Search Console. Инструмент удаления URL препятствует показу веб-адресов в результатах поиска Google, а не блокирует их в аккаунте Search Console. Вам не нужно вручную удалять URL. Со временем они будут исключены автоматически.
  • Вы планируете "начать с чистого листа". Если вы беспокоитесь по поводу мер, принятых в отношении вашего сайта вручную, или если вы недавно приобрели домен у другого лица и устранили оставшиеся после него проблемы, советуем запросить повторную проверку. Сообщите при этом, с какими проблемами вы столкнулись и что изменили на сайте.
  • Вам нужно "отключить" сайт после взлома. Если ваш сайт был взломан и вы хотите исключить из Google Поиска проиндексированные страницы с вредоносным кодом, используйте инструмент удаления URL для блокировки веб-адресов, которые были созданы хакером, например http://www.example.com/buy-cheap-cialis-skq3w598.html. Однако мы не рекомендуем блокировать все страницы сайта или URL, которые нужно будет проиндексировать в будущем. Вместо этого удалите вредоносный код, а затем роботы Google повторно просканируют ваш сайт. Подробнее…
  • Вам важно, чтобы индексировалась "правильная" версия сайта. На многих ресурсах одинаковые HTML-страницы и файлы можно найти по разным URL. Если вы не хотите, чтобы ваш контент повторялся в результатах поиска, прочитайте эту статью. Не используйте инструмент удаления URL, чтобы заблокировать нежелательные версии URL. Это не поможет сохранить в Google Поиске предпочтительную версию страницы, зато вероятно удаление всех версий URL (с префиксом http или https, с субдоменом www и без него).

Как заблокировать URL

Важные примечания

  • Страницы блокируются на срок до шести месяцев. После этого они опять могут появляться в результатах поиска (узнайте, как удалять страницы навсегда).
  • Блокировка URL не запрещает Google сканировать вашу страницу, а лишь препятствует ее показу в результатах поиска. Google продолжит сканировать страницу, если она существует и не заблокирована другим способом (например, с помощью тега noindex). Из-за этого не исключено, что Google в очередной раз просканирует и кеширует страницу до того, как вы удалите ее с сайта или защитите паролем, и она снова появится в результатах поиска по истечении срока действия вашего запроса.
  • Если вы воспользуетесь нашим инструментом, а страницу будет невозможно открыть (код статуса 404, 502 или 503), Google причислит ее к удаленным и ваш запрос на блокировку утратит силу. В этом случае любая страница, обнаруженная позже по тому же URL, будет считаться новой и свободно показываться в результатах поиска.

 

Чтобы временно скрыть страницу или обновить ее вид в Google Поиске после изменения контента, следуйте приведенным ниже инструкциям.

  1. URL должен относиться к принадлежащему вам ресурсу Search Console. Для других случаев есть отдельные инструкции.
  2. Откройте инструмент удаления URL.
  3. Перейдите на вкладку Временные удаления.
  4. Нажмите Создать запрос.
  5. Выберите Временное удаление URL или Удаление кешированной копии страницы.
    1. Временное удаление URL

      Принципы работы

      Страница не появляется в результатах поиска примерно шесть месяцев. По истечении данного срока показ страницы в Google Поиске может возобновиться, но только после того, как робот Googlebot вновь ее просканирует.

      Кешированная копия страницы и ее описание также удаляются.

      Отправка запроса этого типа – первый шаг в процедуре, которая позволяет исключить страницу из результатов поиска Google навсегда.

      Вы можете заблокировать либо конкретный URL, либо все URL, начинающиеся с определенного префикса.

      Блокировка одного URL

      • Выберите Удалить только этот URL.
      • В результатах поиска будет заблокирован только тот URL, который точно соответствует указанному вами, вплоть до расширения файла (например, .html).
      • Введите верный URL.
      • Не добавляйте к URL анкер (stranitsa#анкер), поскольку он не будет учитываться при сопоставлении веб-адресов.
      • Изучите примечания ниже.

       

      Блокировка нескольких URL с одинаковым префиксом

      • Выберите Удалить все URL с этим префиксом.
      • Будут скрыты все URL (с субдоменом www и без него), в начале которых присутствует указанный вами префикс. Например, если у вас есть ресурс example.com и вы указали префикс foods/, скрыты будут все следующие URL:
        • example.com/foods/pizza https://www.example.com/foods/bread?type=whole_wheat
        • www.example.com/foods/pasta/spaghetti/bologonese.html
      • Чтобы скрыть все страницы на сайте, не указывайте путь вообще.
      • Изучите примечания ниже.

       

      Примечания

      • Google в период действия блокировки будет сканировать страницу и обновлять ее в кеше, а по истечении установленного срока начнет снова показывать ее в результатах поиска (если только вы не сделаете контент недоступным окончательно).
      • Варианты с префиксами http и https, а также с субдоменом www и без него означают одно и то же. Следовательно, если вы указали URL example.com/stranitsa, то действуют следующие условия:
        • https://example.com/stranitsa соответствует заданному варианту;
        • http://example.com/stranitsa соответствует заданному варианту;
        • https://www.example.com/stranitsa соответствует заданному варианту;
        • http://www.example.com/stranitsa соответствует заданному варианту;
        • субдомены m. и amp. (а также все прочие) делают URL неравнозначными, поэтому http://m.example.com/stranitsa не соответствует заданному варианту.
    2. Удаление кешированной копии страницы

      Принципы работы

      Описание страницы удаляется из результатов поиска до следующего сканирования. Затем в Google появляется ее новое описание. Пока описания нет, вместо него показывается текст о том, что оно недоступно.

      Запрос этого типа можно отправить, если вы удалили со страницы конфиденциальные данные и хотите обновить ее описание в Google Поиске. Пока мы не просканируем страницу снова, она может по-прежнему появляться при поиске удаленного вами контента, однако сам удаленный контент не будет виден ни в ее описании, ни в кешированной версии.

      Примечания

      • Вводите верный URL, который в точности соответствует искомому, вплоть до расширения файла (например, .html). Если вы укажете URL path/stranitsa, следующие URL не будут с ним совпадать:
        • path/Stranitsa, path/stranitsa?1234
        • path/stranitsa.html
      • Не добавляйте к URL анкер (stranitsa#анкер), поскольку он не будет учитываться при сопоставлении веб-адресов.
  6. Нажмите Далее и подтвердите отправку запроса. На его обработку могут потребоваться сутки, и мы не гарантируем, что ответ будет положительным. Проверяйте статус запроса. Если вы увидите, что он отклонен, нажмите Подробнее и ознакомьтесь с информацией о причине.
  7. Отправьте дополнительные запросы, указав все URL, по которым может открываться та же страница, а также варианты URL с измененным регистром, если ваш сервер их поддерживает. В частности, на одну и ту же страницу могут указывать следующие URL:
    • example.com/stranitsa
    • example.com/Stranitsa
    • example.com/page?1234
  8. Если вы хотите удалить URL из результатов поиска окончательно, изучите разделы ниже.

Как найти верный URL

Далее описывается, как найти и отправить с помощью нашего инструмента правильный URL.

URL веб-страницы

При отправке запроса необходимо указать в точности тот URL, который появляется в Google Поиске. К примеру, www.example.com/dragon и www.example.com/Dragon считаются двумя разными URL, хотя почти не отличаются друг от друга. Если вы введете URL неточно, то не добьетесь удаления нежелательных результатов поиска.

Чтобы указать URL правильно, выполните следующие действия:

  1. Откройте нужную страницу и скопируйте URL в адресной строке браузера.
  2. Найдите все дополнительные URL страницы. Один и тот же контент может быть доступен по нескольким URL, например:
    http://www.example.com/forum/thread/123
    http://www.example.com/forum/post/456
    http://www.example.com/forum/thread/123?post=456
    http://www.example.com/forum/thread/123?post=456&sessionid=12837460
    

    Даже если URL скрыт по вашему запросу из поиска Google, контент, который вы хотите удалить, может по-прежнему появляться в результатах поиска с другими URL. В этом случае нужно отправить несколько дополнительных запросов – по одному на каждый URL.

URL изображения

Чтобы правильно указать URL изображения, выполните следующие действия:

  1. Найдите изображение в Google Картинках, используя браузер Google Chrome.
  2. Нажмите на изображение правой кнопкой мыши и выберите Копировать адрес ссылки. Не нажимайте на изображение левой кнопкой мыши. Скопированный URL должен начинаться так: https://www.google.com/imgres?imgurl=https.
  3. Вставьте URL в текстовый файл, чтобы он был под рукой при отправке запроса на удаление.
  4. Найдите все дополнительные URL. Изображение иногда имеет разные URL даже на одном и том же сайте, а может находиться и на нескольких сайтах. Что нужно сделать:
    1. Нажмите на изображение в результатах поиска правой кнопкой мыши и выберите Найти картинку (Google).
    2. Нажмите Все размеры под строкой "Есть изображения других размеров".
    3. Также проверьте раздел "Страницы с подходящими изображениями" внизу страницы результатов поиска.

Как удалить контент из Google Поиска навсегда

Инструмент удаления URL позволяет скрыть вашу страницу лишь временно (примерно на шесть месяцев). Если вы хотите исключить контент из результатов поиска Google навсегда, примите дополнительные меры.

  1. Выполните одно из перечисленных ниже действий.
    • Удалите или измените контент сайта (изображения, страницы, каталоги) и убедитесь, что ваш веб-сервер отправляет ответ с кодом статуса HTTP 404 (не найдено) или 410 (удалено). Файлы, формат которых отличается от HTML, например документы PDF, следует удалять с сервера полностью. Подробнее о кодах статусов HTTP
    • Заблокируйте доступ к контенту, например установите пароль.
    • Запретите сканирование страницы с помощью метатега noindex. Этот метод менее безопасен, чем остальные.
    • Не используйте файл robots.txt, чтобы скрыть страницу из результатов Google Поиска.
  2. Если перед окончательным удалением контента вы заблокировали страницу (шаг 1), снимите блокировку, а затем снова ее включите. Тогда страница будет исключена из индекса, если наш робот повторно сканировал ее после блокировки.

Как отменить запрос

Если вы хотите отозвать свой запрос на временную блокировку контента в результатах поиска Google, выполните следующие действия:

  1. Откройте инструмент удаления URL.
  2. Найдите свой запрос в таблице с историей.
  3. Нажмите кнопку меню More рядом с запросом и выберите Отменить запрос.

Как посмотреть историю запросов на удаление контента

Вы можете посмотреть историю всех действующих и устаревших запросов относительно вашего сайта за последние шесть месяцев.

Запросы от пользователей без права собственности на сайт

Речь идет о запросах, которые были отправлены с помощью инструмента удаления устаревшего контента. Этот инструмент позволяет обычным пользователям запрашивать обновление результатов поиска Google, чтобы они не содержали информации, которой уже нет на каком-либо сайте, в частности на вашем. В случае одобрения запроса результаты поиска обновляются. Если искомая страница перестала существовать, она удаляется из индекса и больше не показывается. Если страница осталась, но с нее удалены определенные материалы, эти материалы перестают учитываться при поиске и появляться в результатах.

Список таких запросов за последние шесть месяцев приводится на вкладке Устаревший контент.

Как посмотреть этот список:

  1. Откройте инструмент удаления URL и перейдите на вкладку Устаревший контент. В таблице вы увидите информацию, описанную ниже.
URL
URL, который должен был быть заблокирован. В запрос включены варианты с префиксами http и https, а также с субдоменом www и без него.
Тип
Тип запроса. Возможные варианты:
  • Удаление устаревшего кеша. Страница по-прежнему существует, но некоторые материалы были с нее удалены. После исполнения запроса описание страницы исключается из результатов поиска до следующего сканирования. Страница перестает появляться в результатах при поиске удаленных материалов.
  • Удаление устаревших страниц. Страницы больше не существует. Исполнение запроса означает ее исключение как из индекса Google, так и из результатов поиска.
Запрошено
Дата подачи запроса (по тихоокеанскому времени).
Статус
Статус запроса на удаление устаревшего контента. Возможные варианты:
  • Одобрено. Запрос одобрен, изменения скоро вступят в силу.
  • Отклонено: контент все ещё находится на странице. Контент помечен автором запроса как удаленный, но по-прежнему находится на странице. Необходимо удалить его, чтобы в индексе Google появились актуальные данные.
  • Отклонено: устаревший контент отсутствует в индексе. Контент помечен автором запроса как устаревший, но отсутствует в проиндексированной версии страницы. Возможно, этот контент был удален и робот Googlebot повторно просканировал страницу до того, как мы получили запрос. Возможно, пользователь ошибся в запросе и указал контент, которого никогда не было на этой странице.
  • Отклонено: страница не проиндексирована. Указанный URL отсутствует в индексе Google.
  • Отклонено: повторный запрос. Аналогичный запрос находится на рассмотрении.
  • Отклонено: страница не удалена. Страница помечена автором запроса как удаленная, но по-прежнему существует.
  • Отклонено: причина неизвестна. Запрос не удалось удовлетворить по причине, которая не относится к перечисленным выше.
Запросы от владельцев сайта

Вы можете посмотреть список запросов на удаление, которые отправляли за последние шесть месяцев вы сами.

Как это сделать:

  1. Откройте инструмент удаления URL и перейдите на вкладку Временные удаления. В таблице вы увидите информацию, описанную ниже.
URL
URL, который должен был быть заблокирован. В запрос включены варианты с префиксами http и https, а также с субдоменом www и без него.
Тип
Тип запроса:
Статус
Статус запроса:
  • Запрос обрабатывается. Запрос ещё находится в обработке.
  • Запрос отклонен. В рассмотрении отказано (скорее всего потому, что уже поступил похожий запрос). Ознакомьтесь с другими возможными причинами отказа.
  • Запрос отменен. Вы отменили свой запрос.
  • URL временно удален. Указанный вами URL сейчас скрыт из результатов поиска Google. Если вы не удалите его окончательно, он может снова появиться в Google примерно через шесть месяцев.
  • Срок удаления истек. Запрос на удаление URL больше не действует, и страница может снова появиться в результатах поиска, если вы не отправите новый запрос.
  • Данные удалены. Запрос на удаление кешированной версии исполнен.

 

Как посмотреть список URL, на которые жаловались из-за контента для взрослых

Пользователи могут сообщать Google об URL с контентом только для взрослых при помощи этой формы. Отправленные URL проверяются, и если мы решим, что данный контент должен фильтроваться средствами Безопасного поиска, эти страницы помечаются как контент для взрослых.

Чтобы найти на своем сайте контент, который помечен как предназначенный только для взрослых, выполните следующие действия:

  1. Откройте инструмент удаления URL.
  2. Перейдите на вкладку Фильтрация Безопасным поиском.

Вы увидите таблицу с запросами пометить ваш контент как предназначенный для взрослых. Если вы считаете, что какая-либо ваша страница классифицирована неправильно, то сообщите об этом на форуме Google для веб-мастеров.

Варианты статуса для запросов с фильтрацией Безопасным поиском:

  • Запрос обрабатывается. Обычно на обработку запроса требуется несколько дней, но она может занять и более долгий срок.
  • Запрос отменен. Пользователь, который создал запрос, отменил его.
  • Запрос отклонен по одной из возможных причин.
  • Отфильтровано. Запрос был одобрен, и URL не показывается в результатах поиска Google у тех пользователей, которые включили Безопасный поиск.

Разница между инструментом удаления URL и инструментом удаления устаревшего контента

На платформе Search Console есть два инструмента для исключения материалов из результатов поиска:

  • Инструмент удаления URL (ему посвящена эта статья). Он используется, если нужно на время (180 дней) исключить из Google Поиска существующую страницу или изображение, а также в случае, если уже удаленная с сайта страница или изображение продолжает появляться в результатах поиска. Работать с этим инструментом могут только владельцы ресурсов Search Console.
  • Инструмент удаления устаревшего контента. Он используется, если страница или изображение уже отсутствует в Интернете или продолжает существовать в измененном виде, а в Google Поиске по-прежнему показывается старый результат. Если пользователь получит положительный ответ на свой запрос, удаленной страницы или изображения больше не будет в Google Поиске, а измененный контент будет обновлен в результатах. Для работы с этим инструментом не нужно быть владельцем сайта.
Эта информация оказалась полезной?
Как можно улучшить эту статью?