Доступна ли моя страница роботам Google?
Зачастую при устранении неполадок с сайтом необходимо узнать, есть ли у робота Google доступ к определенному URL, т. е. может ли он перейти на вашу страницу. Страница может быть недоступна по разным причинам, например потому что она защищена паролем, заблокирована для сканирования в файле robots.txt на вашем сайте или закрыта для индексирования (но не сканирования) при помощи тега или директивы noindex.
Проверить, доступна ли веб-страница или изображение роботам Google, можно указанными ниже способами.
Если URL относится к принадлежащему вам ресурсу в Search Console
- Откройте инструмент проверки URL.
- Укажите URL веб-страницы или изображения.
- Чтобы узнать, была ли страница доступна во время последнего сканирования, разверните раздел "Покрытие" и изучите результаты согласно инструкциям ниже.
- Чтобы узнать, доступен ли ресурс в данный момент, нажмите Проверить страницу на сайте, разверните раздел "Покрытие" и изучите результаты согласно инструкциям ниже.
- В полученных результатах изучите следующие значения:
- Сканирование разрешено? Желательное значение – "Да". Любое другое значение указывает на то, что страница недоступна роботам Google (вероятно, из-за блокировки в файле robots.txt).
- Получение страницы. Желательное значение – "Успешно". Любое другое значение указывает на то, что страница недоступна роботам Google. Чтобы узнать, с чем это связано, изучите полученные результаты.
- Индексирование разрешено? Желательное значение – "Да". Любое другое значение указывает на наличие тега или директивы, запрещающей роботам Google индексировать ресурс.
Если URL не относится к принадлежащему вам ресурсу в Search Console
Например, так бывает, когда изображение на вашей странице размещено в другом домене. Выполните следующие действия:
- Откройте инструмент проверки расширенных результатов.
- Введите URL страницы или изображения и нажмите Проверить страницу.
- Когда на экране появятся результаты проверки, разверните раздел "Сканирование".
- Должны быть представлены следующие результаты:
- Сканирование разрешено? Желательное значение – "Да". Любое другое значение указывает на то, что страница недоступна роботам Google (вероятно, из-за блокировки в файле robots.txt).
- Получение страницы. Желательное значение – "Успешно". Любое другое значение указывает на то, что страница недоступна роботам Google. Чтобы узнать, с чем это связано, изучите полученные результаты.
- Индексирование разрешено? Желательное значение – "Да". Любое другое значение указывает на наличие тега или директивы, запрещающей роботам Google индексировать ресурс.
