Инструмент удаления URL и Безопасный поиск

Инструмент удаления URL позволяет владельцу сайта временно исключить некоторые страницы из результатов поиска Google, а также посмотреть, кто из владельцев и других пользователей ресурса запрашивал удаление и на какие страницы сайта жаловались из-за контента для взрослых.

Если вам нужно скрыть в Google Поиске материалы с сайта, который вам не принадлежит, прочитайте эту статью.

Требования

Ниже описано, как скрыть тот или иной URL своего сайта в результатах поиска Google.

В каких случаях использовать инструмент удаления URL

• Вы хотите быстро заблокировать показ в Google Поиске какого-либо URL, относящегося к вашему ресурсу в Search Console. Это может быть URL веб-страницы или изображения. Если же вам нужно навсегда удалить URL из Google Поиска, понадобится выполнить дополнительные действия.
• Вы удалили со страницы неуместную или конфиденциальную информацию и хотите, чтобы изменения были отражены в результатах поиска Google.

В каких случаях не следует использовать инструмент удаления URL

• Вы хотите заблокировать страницу сайта, который вам не принадлежит. Если это так:
  • Если контента нет на текущей версии веб-страницы, вы можете запросить обновление устаревшего контента в Google Поиске.
  • Если контент все ещё присутствует на веб-странице, ознакомьтесь с этой информацией.
• Вам нужно навсегда удалить свой URL из Google Поиска. Инструмент удаления URL – это лишь первый этап процедуры, которая позволит навсегда удалить URL. Не выполнив оставшиеся действия, вы не сможете навсегда удалить URL.
• Вы решили удалить какой-либо контент из интернета. Этот инструмент позволяет блокировать материалы только в Google Поиске.
• Вам нужно, чтобы ваш контент перестал показываться в других поисковых системах. Этот инструмент позволяет блокировать материалы только в Google Поиске.
• Вы хотите удалить из результатов поиска ставший ненужным контент, например старые страницы, вместо которых пользователи видят сообщение об ошибке 404. Если вы изменили структуру своего сайта и некоторые URL в индексе Google устарели, поисковые роботы обнаружат это и повторно просканируют их, а старые страницы постепенно будут исключены из результатов поиска. Не нужно запрашивать срочное удаление.
• Вы решили устранить ошибки сканирования в своем аккаунте Search Console. Инструмент удаления URL препятствует показу веб-адресов в результатах поиска Google, а не блокирует их в аккаунте Search Console. Вам не нужно вручную удалять URL. Со временем они будут исключены автоматически.
• Вы планируете "начать с чистого листа". Если вы беспокоитесь по поводу мер, принятых в отношении вашего сайта вручную, или недавно приобрели домен у другого лица и устранили оставшиеся после него проблемы, советуем запросить повторную проверку. Сообщите при этом, с какими проблемами вы столкнулись и что изменили на сайте.
• Вам нужно "отключить" сайт после взлома. Если ваш сайт был взломан и вы хотите исключить из Google Поиска проиндексированные страницы с вредоносным кодом, используйте инструмент удаления URL для блокировки веб-адресов, которые были созданы хакером, например http://www.example.com/buy-cheap-cialis-skq3w598.html. Однако мы не рекомендуем блокировать все страницы сайта или URL, которые нужно будет проиндексировать в будущем. Вместо этого удалите вредоносный код, а затем роботы Google повторно просканируют ваш сайт. Подробнее…
• Вам важно, чтобы индексировалась определенная версия сайта. На многих ресурсах одни и те же HTML-страницы и файлы можно найти по разным URL. Если вы не хотите, чтобы ваш контент повторялся в результатах поиска, прочитайте статью о рекомендуемых способах нормализации. Не используйте инструмент удаления URL, чтобы заблокировать нежелательные версии URL. Это не поможет сохранить предпочтительную версию страницы, а приведет к удалению всех версий URL (http/https, с префиксом www или без него).

Временная блокировка URL

Как временно скрыть страницу или обновить ее вид в Google Поиске после изменения контента

1. URL должен относиться к принадлежащему вам ресурсу Search Console. Если это не так, ознакомьтесь с первым пунктом раздела В каких случаях не следует использовать инструмент удаления URL.
2. Откройте инструмент удаления URL.
3. Перейдите на вкладку Временные удаления.
4. Нажмите Создать запрос.
5. Выберите Временное удаление URL или Удаление фрагмента страницы в поиске.
   1. Временное удаление URL

      Принципы работы

      Страница не появляется в результатах поиска примерно шесть месяцев. По истечении этого срока страница может опять появляться в Google Поиске, но только после того, как робот Googlebot вновь ее просканирует.

      Также из результатов поиска Google будет удален фрагмент страницы.

      Отправка запроса этого типа – первый шаг в процедуре, позволяющей исключить страницу из результатов поиска Google навсегда.

      Вы можете заблокировать либо конкретный URL, либо все URL, начинающиеся с определенного префикса.

      Блокировка одного URL

      1. Укажите полный URL, который нужно заблокировать. Введите верный URL.
      2. Выберите Удалить только этот URL.

      Важные примечания

      • В результатах поиска будет заблокирован только тот URL, который точно соответствует указанному вами, вплоть до расширения файла (например, .html) и его параметров.
      • В URL не должно быть анкеров (название-страницы.html#анкер) – они не поддерживаются.
      • Изучите примечания ниже.

       

      Блокировка нескольких URL с одинаковым префиксом

      1. Выберите Удалить все URL с этим префиксом.
      2. Укажите префикс тех URL, которые нужно заблокировать. Будут скрыты все URL (с субдоменом www и без него), в начале которых присутствует этот префикс. Пример:
         • Ресурс: example.com
         • Блокируемый путь: https://example.com/foods/
         • Будут скрыты следующие URL:
           • http://example.com/foods/pizza
           • https://www.example.com/foods/bread?type=whole_wheat
           • www.example.com/foods/pasta/spaghetti/bologonese.html
         • Чтобы скрыть все страницы на сайте, укажите URL так: https://example.com/.
         • Если скрыть URL https://www.domain, то также станет невиден вариант https://domain, так как блокировка действует для всех версий с префиксами http и https, а также с и без www.
         • Если скрыть URL https://staging.domain, это не повлияет на варианты www.domain и https://domain.com, так как при удалении директории блокируются все сайты с таким же префиксом, но изменения не касаются субдомена.

      Изучите примечания ниже.

       

      Примечания

      • Google в период действия блокировки будет сканировать страницу и обновлять ее фрагмент, а по истечении установленного срока снова начнет показывать ее в результатах поиска (если только вы не сделаете контент недоступным окончательно).
      • Если при удалении директории не используется косая черта, станут недоступными все следующие сочетания: https://example.com/pageB, https://example.com/page и https://example.com/page/*.
      • Варианты с префиксами http и https, а также с субдоменом www и без него означают одно и то же. Следовательно, если вы указали URL example.com/stranitsa, то действуют следующие условия:
        • https://example.com/stranitsa соответствует заданному варианту;
        • http://example.com/stranitsa соответствует заданному варианту;
        • https://www.example.com/stranitsa соответствует заданному варианту;
        • http://www.example.com/stranitsa соответствует заданному варианту;
        • субдомены m. и amp. (а также все прочие) делают URL неравнозначными, поэтому http://m.example.com/stranitsa не соответствует заданному варианту.
   2. Удаление фрагмента страницы в поиске

      Принципы работы

      Описание страницы удаляется из результатов поиска до следующего индексирования. Затем в Google появляется ее новое описание. Пока описания нет, вместо него показывается текст о том, что оно недоступно.

      Запрос этого типа можно отправить, если вы удалили со страницы конфиденциальные данные и хотите обновить ее фрагмент в Google Поиске. Пока мы не проиндексируем страницу снова, она может по-прежнему появляться при поиске удаленного вами контента, однако сам удаленный контент не будет виден в ее фрагменте.

      Примечания

      • Вводите верный URL, который в точности соответствует искомому, вплоть до расширения файла (например, .html). Если вы укажете URL path/stranitsa, следующие URL не будут с ним совпадать:
        • path/Stranitsa, path/stranitsa?1234
        • path/stranitsa.html
      • URL с анкерами (название-страницы.html#анкер) не поддерживаются, поэтому в URL не должно быть анкеров.
6. Нажмите Далее и подтвердите отправку запроса. На его обработку могут потребоваться сутки, и мы не гарантируем, что ответ будет положительным. Проверяйте статус запроса. Если вы увидите, что он отклонен, нажмите Подробнее и ознакомьтесь с информацией о причине.
7. Отправьте дополнительные запросы, указав все URL, по которым может открываться та же страница, а также варианты URL с измененным регистром, если ваш сервер их поддерживает. В частности, на одну и ту же страницу могут указывать следующие URL:
   • example.com/stranitsa
   • example.com/Stranitsa
   • example.com/page?1234
8. Если вы хотите удалить URL из результатов поиска окончательно, изучите разделы ниже.

Как найти верный URL

Далее описывается, как найти и отправить с помощью нашего инструмента правильный URL.

Как удалить контент из Google Поиска навсегда

Инструмент удаления URL позволяет скрыть вашу страницу лишь временно (примерно на шесть месяцев). Если вы хотите исключить контент из результатов поиска Google навсегда, примите дополнительные меры.

1. Выполните одно из перечисленных ниже действий.
   • Удалите или измените контент сайта (изображения, страницы, каталоги) и убедитесь, что ваш веб-сервер отправляет ответ с кодом статуса HTTP 404 (не найдено) или 410 (удалено). Файлы, формат которых отличается от HTML, например документы PDF, следует удалять с сервера полностью. Подробнее о кодах статусов HTTP…
   • Заблокируйте доступ к контенту, например установите пароль.
   • Укажите, что страница не должна индексироваться, используя метатег noindex. Этот метод менее безопасен, чем остальные.
   • Не используйте файл robots.txt, чтобы скрыть страницу из результатов Google Поиска.
2. Если перед окончательным удалением контента вы заблокировали страницу (шаг 1), снимите блокировку, а затем снова ее включите. Тогда страница будет исключена из индекса, если наш робот повторно сканировал ее после блокировки.

Как отменить запрос

Если вы хотите отозвать свой запрос на временную блокировку контента в результатах поиска Google, выполните следующие действия:

1. Откройте инструмент удаления URL.
2. Найдите свой запрос в таблице с историей.
3. Нажмите кнопку меню рядом с запросом и выберите Отменить запрос.

Как посмотреть историю запросов на удаление контента

Вы можете посмотреть историю всех действующих и устаревших запросов относительно вашего сайта за последние шесть месяцев.

Как найти на своем сайте контент, который был помечен как предназначенный только для взрослых

Пользователи могут сообщать Google об URL с контентом только для взрослых при помощи этой формы. Отправленные URL проверяются, и, если мы решим, что данный контент должен фильтроваться средствами Безопасного поиска, эти страницы помечаются как контент для взрослых.

Чтобы найти на своем сайте контент, который помечен как предназначенный только для взрослых, выполните следующие действия:

1. Откройте инструмент удаления URL.
2. Перейдите на вкладку Фильтрация Безопасным поиском.
3. Вы увидите таблицу с запросами пометить ваш контент как предназначенный для взрослых.

Варианты статуса для запросов с фильтрацией Безопасным поиском:

• Запрос обрабатывается. Обычно на обработку запроса требуется несколько дней, но она может занять и более долгий срок.
• Запрос отменен. Пользователь, который создал запрос, отменил его.
• Запрос отклонен по одной из возможных причин.
• Отфильтровано. Запрос был одобрен, и URL не показывается в результатах поиска Google у тех пользователей, которые включили Безопасный поиск.

Если с тех пор, как вы выполнили инструкции по оптимизации сайта для Безопасного поиска, прошло не менее 2–3 месяцев, но ваши страницы по-прежнему классифицируются некорректно, вы можете запросить проверку.

В чем разница между инструментом удаления URL и инструментом обновления устаревшего контента

В Search Console есть два инструмента для удаления и обновления материалов в результатах поиска:

• Инструмент удаления URL (ему посвящена эта статья). Используйте его, если нужно на время (180 дней) исключить из Google Поиска страницу или изображение, а также в случае, если уже удаленная с сайта страница или картинка продолжает появляться в результатах поиска. Работать с этим инструментом могут только владельцы ресурсов в Search Console.
• Инструмент обновления устаревшего контента. Используйте его, если страница или картинка была удалена из интернета или обновлена, а в Google Поиске по-прежнему показывается старый результат. Если мы одобрим запрос, удаленный контент исчезнет из Google Поиска, а измененный – будет обновлен в результатах. Для работы с этим инструментом не нужно быть владельцем сайта.