Инструмент проверки URL

Как пользоваться инструментом проверки URL

Инструмент проверки URL позволяет получить сведения о проиндексированной роботами Google версии той или иной страницы. Вы можете проверить информацию о структурированных данных или видео на странице, о связанной с ней AMP-версии, текущем статусе и возможности индексирования.

Запустить инструмент проверки URL можно двумя способами:

• Ввести полный URL страницы, которую нужно проверить, в строке поиска, расположенной в верхней части интерфейса Search Console. Он должен вести на доступный ресурс.
• Нажать на значок проверки рядом с URL страницы (в большинстве отчетов). Иногда, чтобы его увидеть, необходимо навести указатель мыши на URL.

Открыть инструмент проверки URL

 

Учебный курс по Google Search Console: инструмент проверки URL

Назначение инструмента

• Просмотр статуса URL в индексе Google. Получите сведения о проиндексированной роботом Googlebot версии вашей страницы и узнайте, что способствовало или мешало ее обработке.
• Проверка опубликованной страницы. Узнайте, возможно ли проиндексировать определенную веб-страницу на вашем сайте.
• Запрос индексирования. Запросите сканирование страницы роботом Googlebot.
• Просмотр отрисованной страницы. Создайте скриншот, который поможет вам понять, как робот Googlebot воспринимает вашу страницу.
• Список загруженных ресурсов, результаты обработки кода JavaScript и другая информация. По ссылкам Изучить просканированную страницу > Дополнительно (результат, включенный в индекс) или Изучить проверенную страницу > Дополнительно (результат проверки опубликованной страницы) вы можете узнать, какие ресурсы загружаются при обработке страницы, как выглядит ее код и т. д.
• Устранение неполадок со страницей, отсутствующей в поиске. Страница может быть не включена в индекс по разным причинам. Инструмент проверки URL поможет вам в устранении некоторых из них.
• Получение информации о вашей канонической странице. Чтобы изучить подробные сведения о проиндексированной версии вашей страницы, выберите Индексирование страниц > Каноническая страница, выбранная Google. Определить каноническую версию страницы можно только на основе результатов индексирования. Проверка опубликованных страниц не дает представления, можно ли считать проверенную версию канонической.

Что не входит в проверку

В результатах проверки не отображаются следующие важные сведения:

• Соответствует ли страница и структурированные данные на ней рекомендациям в отношении качества и безопасности.
• Информация о возможных проблемах с безопасностью сайта и мерах, принятых вручную.
• Подлежит ли контент сайта удалению по требованию законодательства или иным причинам.
• Выполнялась ли временная блокировка URL в Search Console.
• (Проверка опубликованной страницы.) Является ли страница копией другой проиндексированной страницы или ее альтернативной версией. Обычно показываются только канонические страницы или их альтернативные версии.

---

Как посмотреть статус URL в индексе Google

Вы можете запросить данные из индекса Google, которые относятся к вашему ресурсу, в том числе расширенные результаты или видео, статус индексирования и т. д.

Чтобы получить сведения о URL из индекса Google, выполните следующие действия:

1. Откройте инструмент проверки URL.
2. Введите полностью URL, который вы хотите проверить. На что следует обратить внимание:
   • URL должен относиться к вашему ресурсу. Чтобы проверить URL стороннего ресурса, воспользуйтесь инструментом проверки расширенных результатов или AMP-страниц.
   • Обычные и AMP-страницы. В инструменте доступны данные об обычной странице и о связанной с ней AMP-версии этой страницы. Проверять их можно раздельно.
   • Канонические и альтернативные версии страниц. Зачастую страницы являются альтернативными версиями или точными копиями. В этом случае вы также можете получить сведения о канонической версии, если она относится к принадлежащему вам ресурсу.
3. Интерпретация результатов проверки.
4. Если вы устранили выявленные проблемы, выполните проверку опубликованного URL. Так вы сможете убедиться, что ваши исправления были приняты. Обратите внимание, что проверке поддаются не все проблемы.
5. При необходимости отправьте запрос на индексирование страницы.

Число запросов на проверку, которые вы можете отправить за один день, ограничено для каждого принадлежащего вам ресурса.

О статусе проиндексированного URL

Основные положения

• Проверяется не сама страница, которая опубликована в интернете, а ее последняя проиндексированная версия. Информация из индекса используется Google при показе результатов поиска. Со времени последнего сканирования страница могла быть изменена или удалена. Чтобы получить сведения о ее текущей версии, нажмите кнопку Выполнить проверку.
• Значение "URL есть в индексе Google" не гарантирует, что страница появится в результатах поиска. Инструмент проверки URL не учитывает всех требований к показу страниц в Google. Чтобы проверить, появляется ли ваша страница в результатах поиска, выполните поиск ее URL в Google.
• Если один URL перенаправляет пользователей на другой, в результатах показывается протестированный URL, а не целевая страница. Чтобы увидеть результаты индексирования канонической страницы, относящейся к странице с переадресацией, нажмите кнопку Проверить в разделе Индексирование страницы > Индексирование.

Интерпретация результатов

1. Чтобы узнать, может ли определенная страница появляться в Google Поиске, найдите ее общий статус в верхней части интерфейса инструмента проверки URL. Вариант URL есть в индексе Google означает, что она может быть (но необязательно будет) представлена в результатах поиска Google, а вариант URL нет в индексе Google – что этого не произойдет.
2. Разверните раздел Индексирование страницы, чтобы изучить дополнительные сведения:
   • Как обнаружено. Информация о том, как роботы Google нашли тот или иной URL.
   • Сканирование. Дата сканирования страницы (если роботам Google удалось его выполнить) или проблемы, помешавшие ему. Если страница имеет статус URL нет в индексе Google, причина обычно описывается в этом разделе.
   • Индексирование. Канонический URL, который алгоритмы Google выбрали для этой страницы.
3. Улучшения. Если вы добавили структурированные данные и реализовали на странице AMP-технологии или создали ее AMP-версию, вы можете ознакомиться со сведениями в разделе "Улучшения".
4. Чтобы посмотреть информацию о запросе, включая данные об HTTP-запросе и ответе, и узнать, какой HTML был возвращен, нажмите кнопку Изучить просканированную страницу. Если она не работает, могла возникнуть проблема при извлечении контента страницы. Наведите курсор на неактивную кнопку, чтобы посмотреть причину.

 

К статусу индексирования относится следующая информация:

Общий статус страницы

В верхней части отчета указывается информация о том, может ли URL появляться в результатах поиска Google (с определенными оговорками). Возможны следующие значения:

URL есть в индексе Google

• Что это означает. Страница была проиндексирована и может показываться в результатах поиска Google. Ошибок на связанных с ней AMP-страницах, а также в структурированных данных и иных элементах не обнаружено.
  • Важные примечания. Если URL есть в индексе Google, это само по себе не значит, что страница появляется в результатах поиска. Инструмент проверки URL не учитывает всех требований к показу страниц в Google.
  • Чтобы проверить, появляется ли ваша страница в результатах поиска, выполните поиск ее URL в Google.
• Что можно предпринять. Обычно в таких случаях никаких действий не требуется. При этом вы можете изучить сведения о своей странице, которые доступны Google. Для этого перейдите к разделу с данными об индексировании или улучшениях.

URL есть в индексе Google, но есть проблемы

• Что это означает. Ваш URL есть в индексе Google, но присутствуют некоторые проблемы, которые могут препятствовать показу вашей страницы со всеми примененными к ней улучшениями. Это могут быть неполадки с AMP-страницами, связанными с канонической страницей, или неверный формат структурированных данных, например предназначенных для показа рецептов, вакансий или иных расширенных результатов. Также обратите внимание на важные примечания в разделе URL есть в индексе Google выше.
• Что можно предпринять. Изучите предупреждения или ознакомьтесь с представленными в инструменте сведениями об ошибках и устраните обнаруженные проблемы.

URL нет в индексе Google

• Что это означает. URL не может показываться в результатах поиска Google.
• Что можно предпринять. Чтобы узнать, почему страница не была проиндексирована и как это исправить, перейдите в раздел Индексирование страниц. Если одна и та же ошибка проявлялась неоднократно и вы ее везде исправили, рекомендуем выполнить проверку опубликованной страницы на нескольких страницах (если ваше исправление можно проверить). Затем сообщите об этом Google, нажав Проверить исправление.

URL содержит альтернативную версию страницы

• Что это означает. По этому адресу размещена AMP-страница, которая является альтернативной версией канонической обычной страницы. Значение в поле Робот, выполнивший сканирование позволяет узнать, какой именно поисковый робот (для обычных или для мобильных страниц) определил эту страницу как альтернативную. Сведения о проиндексированной странице приведены в поле Каноническая страница, выбранная Google в разделе Доступность страницы.
• Что можно предпринять. От вас не требуется никаких действий, однако вы можете проверить, указана ли нужная страница в поле "Каноническая страница, выбранная Google".

Индексирование страницы (Могут ли роботы Google найти ее и просканировать?)

В этом разделе указано, удалось ли Google найти и проиндексировать эту страницу.

Статус индексирования

Был ли проиндексирован URL. В заголовке этого раздела указано, почему URL присутствует или отсутствует в результатах поиска Google. Поддерживаются следующие значения:

• Страница проиндексирована
• Страница не проиндексирована, а также значение не проиндексировано (рекомендуем ознакомиться с более подробной информацией о них).
• Страница не проиндексирована: URL неизвестен Google. Это означает, что ранее этот URL роботам Google не встречался.

Чтобы это исправить, выполните проверку опубликованной страницы и убедитесь, что страница доступна. Исправьте все ошибки, какие можете, а затем отправьте страницу на индексирование и проверку исправлений.

Файлы Sitemap

Все указывающие на этот URL файлы Sitemap, которые были отправлены при помощи отчета о файлах Sitemap или перечислены в файле robots.txt вашего сайта. Файлы Sitemap, обнаруженные другими способами, в списке не приводятся. Для крупных или новых сайтов рекомендуется предоставлять файл Sitemap, чтобы сообщить, какие страницы следует сканировать. Ознакомьтесь с известными проблемами.

• Отсутствие данных означает, что тестируемый URL не указан ни в одном файле Sitemap или информация о нем в данный момент недоступна.

Ссылающаяся страница

Страница, с которой, возможно, роботы Google перешли к этому URL. Это может быть как страница, которая ссылается на URL, так и одна из ее предыдущих версий. Если в отчете никакое значение не указано, это не значит, что ссылающейся страницы не существует. Вероятно, в текущий момент о ней нет сведений в инструменте проверки URL. Если показывается сообщение "URL может быть известен из других источников, которые в настоящее время не раскрываются", это говорит о том, что роботы Google обнаружили URL иным способом (не с помощью файла Sitemap или ссылающейся страницы), но сведений об этом способе в инструменте проверки URL пока нет.

Последнее сканирование

Время, когда страница была просканирована в последний раз, в вашем часовом поясе. Вся информация, представленная в инструменте проверки URL, относится к последней просканированной версии страницы.

Робот, выполнивший сканирование

Тип агента пользователя, который выполнил сканирование (для компьютеров или мобильных устройств).

Сканирование разрешено?

В этом поле указано, предоставлен ли роботам Google доступ к странице или он заблокирован с помощью файла robots.txt. Если сканирование запрещено, а вам нужно его разрешить, то с помощью инструмента проверки файла robots.txt выясните, какое правило блокирует роботы Google, и удалите его. Проверьте работу этого правила на исследуемом URL. У вас должен быть доступ к файлу robots.txt через браузер по адресу <корневой каталог сайта>/robots.txt, например https://example.com/robots.txt.

Получение страницы

В этом поле содержится информация о том, удалось ли роботам Google получить доступ к странице на сервере. Роботы Google могут иметь доступ к странице, даже если по какой-то причине ее не удается просканировать. Возможные значения:

• Успешно – страницу удалось получить при индексировании.
• Ошибка, а также одна из причин возникновения этого статуса.
• Отсутствует – ошибка, которая не подпадает ни под одну из причин возникновения этого статуса. Это стандартное уведомление об ошибке, и, к сожалению, у нас нет другой информации.

Индексирование разрешено?

Сведения о том, разрешено ли индексирование страницы. Если оно запрещено, то в текущем поле будет указано, каким именно способом. В этом случае страница не будет показываться в результатах поиска Google. Чтобы разблокировать индексирование, удалите тег или директиву noindex. Страница, на которой обнаружен атрибут или заголовок indexifembedded в сочетании с директивой noindex, будет проиндексирована, только если она встроена.

Внимание! Если доступ к странице заблокирован при помощи файла robots.txt (см. раздел Сканирование разрешено?), в поле Индексирование разрешено? всегда будет указано значение "Да", потому что робот Googlebot не сможет увидеть и принять к сведению директивы noindex. В этом случае страница может появляться в результатах поиска, даже если индексирование запрещено в настройках вашего сайта.

Каноническая страница, выбранная пользователем

Если на вашей странице явным образом указан канонический URL, он будет представлен здесь. Если страница не является альтернативной версией, здесь может быть указан вариант Нет, но это не считается проблемой. Если существует несколько альтернативных версий страницы, рекомендуется явным образом указывать канонический URL. Указать канонический URL можно с помощью тега <link rel="canonical">, HTTP-заголовка и файла Sitemap, а также другими способами. Мы не гарантируем, что выберем именно этот URL, но он будет учитываться. В случае с AMP-версиями в качестве канонического URL следует указывать обычный вариант страницы (если речь не идет об AMP-странице с канонической ссылкой на саму себя).

Каноническая страница, выбранная Google

Страница, которую роботы Google выбрали среди аналогичных версий в качестве канонического URL. Канонический URL, выбранный Google, может не совпадать с тем, что указал веб-мастер. Если альтернативных версий страницы не существует, проверяется каноническая версия, выбранная Google. Если в этом поле указана неверная страница, вы можете явным образом задать каноническую версию.

В результатах поиска не всегда показывается канонический URL. Например, если у страницы есть каноническая версия, предназначенная для компьютеров, и мобильная, то URL может выбираться с учетом устройства, на котором выполняется поиск.

Обратите внимание, что значение в этом поле может на несколько часов отставать от значения в нашем индексе.

Индексирование видео (роликов на странице)

Раздел отображается только в том случае, если на проиндексированной странице обнаружено видео. Статус индексирования показывает, удалось ли проиндексировать видео на этой странице.

Только одно видео на странице может быть проиндексировано. Если на ней всего один ролик, то будут показаны результаты, относящиеся к нему. Если на странице несколько видео, Google будет индексировать их в порядке приоритета и прервет индексацию, как только одно из них будет проиндексировано. В отчете будет информация об успешно проиндексированном видео или о наиболее приоритетном видео, если индексирование выполнить не удалось. Подробнее об индексировании видеороликов…

Статус индексирования видео

Страница с видео может иметь следующие статусы индексирования:

• Видео проиндексировано. Google удалось найти одно или более видео на странице и обработать одно из них.
• Видео не проиндексировано. Google удалось найти одно или более видео на странице, но не получилось обработать ни одно из них.

Дополнительная информация о видео

Ознакомьтесь с более подробной информацией о видеоконтенте, которая будет включена в отчет.

Проблемы с индексированием видео

Помешать индексированию видео может любая из перечисленных ниже проблем, отмеченных в разделе Информация о видео. Если на странице было обнаружено несколько видео, отмеченная проблема относится к приоритетному ролику.

Причина	Описание
Google не удалось определить наиболее заметное видео на этой странице	Робот Googlebot не обнаружил ни одного достаточно заметного видео на этой странице. Устаревший тип проблемы. С 12 июня используется более подробная классификация нарушений. Эта проблема может быть по-прежнему видна в отчете об индексировании страниц с видео, однако она больше не будет влиять на страницы.
Видео находится за пределами области просмотра	Чтобы видео было проиндексировано, при загрузке страницы оно должно находиться в области просмотра. Переместите его так, чтобы оно было полностью размещено в этой области и было видно при загрузке страницы. Выполните проверку URL опубликованной страницы. При этом будет создан скриншот, который позволит понять, как Google ее воспринимает.
Видео слишком маленькое	Размер видео недостаточен для индексирования. Увеличьте высоту видео, чтобы она была более 140 пикселей, а также ширину, чтобы она превышала 140 пикселей и составляла не менее трети ширины страницы.
Видео слишком высокое	Размер видео по вертикали превышает максимально допустимый для индексирования. Уменьшите высоту, чтобы она была не более 1080 пикселей.
Не удается определить расположение и размер видео	Видеопроигрыватель отсутствует на странице во время ее загрузки. Обычно так происходит, когда место проигрывателя занимает его изображение (например, скриншот), на которое нужно нажать, чтобы начать воспроизведение. Для решения этой проблемы загружайте видеопроигрыватель в фактическом размере и размещайте на странице во время ее загрузки, чтобы никакого участия пользователей не требовалось.
mRSS не принимается. Используйте разметку от schema.org.	Для описания видео используется синтаксис mRSS (media RSS), а роботы Google не могут его обработать. Попробуйте использовать для описания видео разметку schema.org.
Недопустимый URL видео	В URL используются запрещенные символы, такие как пробел, или неправильно указан протокол (например, htttttp вместо http).
Неподдерживаемый формат видео	Расширение файла в URL говорит, что видео имеет неподдерживаемый формат. Необходимо использовать поддерживаемые форматы файлов и указывать URL с точным обозначением формата видео. Расширение файла состоит из трех или четырех символов после точки в имени файла. Примеры поддерживаемых форматов: https://example.com/videos/video1.mp4 https://example.com/videos/video1.mpeg Пример неподдерживаемого формата: https://example.com/videos/video1.ogg
Неизвестный формат видео	Расширение видеофайла не соответствует ни одному из поддерживаемых форматов видео или не указано для текущего видеофайла. Google определяет формат видеофайла по его URL. Убедитесь, что видеофайл имеет поддерживаемый формат и соответствующее расширение. Пример поддерживаемого формата: https://example.com/video1.mp4 Примеры неподдерживаемых форматов: https://example.com/videos/myvideo https://example.com/videos/myvideo.324fvsf4rf
URL встроенных данных нельзя использовать для URL видео	Google не поддерживает встраиваемые видео в кодировке Base64. Это означает, что видео со значением атрибута src, которое начинается с data:, например <video src="data:video/mp4;base64,A2553IGpc29tAAA....">, не будет проиндексировано.
Не указан URL значка видео	Значок для этого видео не указан, и Google не удалось его создать. Укажите ссылку на значок видео, используя структурированные данные, файл Sitemap или файл mRSS-фида. Если вы указали URL значка с использованием структурированных данных и в ответ получили сообщение об этой ошибке, проверьте, нет ли в HTML-теге другой ссылки на значок этого же видео. Заголовок, URL видео и URL его значка должны быть одинаковы во всех источниках (файле Sitemap, HTML-тегах, метатегах и структурированных данных), которые описывают это видео на одной и той же странице.
Неподдерживаемый формат значка видео	Судя по расширению файла, указанный значок имеет неподдерживаемый формат. Используйте только поддерживаемые форматы для значков и указывайте соответствующее расширение.
Недопустимый размер значка видео	Предоставлен значок неподходящего размера, и Google не удалось создать значок автоматически. Предоставьте значок допустимого размера.
Доступ к значку запрещен файлом robots.txt	У Google нет доступа к значку на основании правила в файле robots.txt. Если значок расположен на другом сайте, узнайте у его представителей, как можно получить доступ к этому значку, или укажите ссылку на значок, которая доступна без пароля и не блокируется в файле robots.txt.
Прозрачный значок видео	Уровень прозрачности значка превышает допустимый уровень. Не менее 80 % изображения должно иметь значение alpha более 250. Прозрачные значки не могут обрабатываться при индексировании видео.
Не удалось просканировать уменьшенное изображение, так как хост перегружен	Ваш сайт работает на пределе возможностей и не может обработать запросы на сканирование от наших роботов. Google не сможет получить доступ к необходимому для индексирования значку видео, пока наши измерения не покажут, что на вашем сайте снизился трафик. Дополнительные сведения содержатся в документации по лимиту на сканирование.
Не удалось получить значок видео	Робот Google не смог получить доступ к значку по указанному URL. Это не связано с ограничениями в файле robots.txt. Возможно, изображение защищено паролем или его больше нет по указанному URL.
Видео не обработано	Робот Google обнаружил, что на странице есть по крайней мере одно видео, но не стал индексировать его.
Видео ещё не обработано	Видео обрабатывается. Проверьте состояние через несколько дней.
Видео не найдено на сервисе хостинга	Указанное видео отсутствует на сервисе хостинга или находится на частном сервисе, недоступном для поискового робота Google. Найдите видео на этом сервисе и уточните его идентификатор, а затем исправьте идентификатор или URL видео на своей странице.
Значок видео недопустим или отсутствует	Значок видео не указан, недоступен или недопустим. По техническим причинам система не может определить, какая именно из этих проблем является причиной ошибки. Убедитесь, что ссылка на значок представлена в поддерживаемом формате, у графического файла правильное расширение, а значок доступен для Google.
Недопустимый значок видео	Значок недопустим по какой-то причине, не связанной ни с одной указанной ошибкой. Проверьте, соответствует ли указанный значок всем требованиям и доступен ли он для Google.

Улучшения (AMP-страницы, расширенные результаты)

В этом разделе представлены сведения об улучшениях, обнаруженных роботами Google на вашей странице со времени последнего индексирования. Если проиндексировать страницу не удалось или улучшений не найдено, в этом разделе не будет никаких данных.

При нажатии на улучшение откроется вложенная страница с информацией об этом улучшении. Чтобы вернуться на главную страницу проверки, нажмите Проверка URL в верхней части страницы.

В настоящее время в этом инструменте представлена лишь часть улучшений, а именно:

AMP-страницы

При проверке AMP-страницы или обычной страницы, у которой есть AMP-версия, информацию о ней можно получить, выбрав результат проверки, относящийся к AMP. Она поможет вам находить проблемы с индексированием AMP-страниц и другие неполадки и устранять их.

В этом разделе приводятся сведения не о текущей странице, а об AMP-версии, ссылка на которую на ней указана (если сама AMP-страница не является канонической).

Сведения доступны по разным видам ошибок на AMP-страницах – как стандартным, так и связанным с Google.

Чтобы посмотреть сведения о таких же проблемах с другими страницами на вашем сайте, нажмите на строку с описанием проблемы и выберите Открыть отчет.

По результатам проверки с помощью инструмента проверки URL AMP-страница или веб-история может иметь один из следующих статусов:

• AMP-страница действительна/Веб-история действительна. AMP-страница проиндексирована и соответствует нашим требованиям к ее коду.
• AMP-страница недействительна/Веб-история недействительна. На AMP-странице обнаружена ошибка, из-за которой ее невозможно проиндексировать.
• AMP-страница не проиндексирована/Веб-история не проиндексирована (проиндексированная версия) или AMP-страницу нельзя проиндексировать/Веб-историю нельзя проиндексировать (проверка опубликованной страницы). Индексирование страницы запрещено, например с помощью правила в файле robots.txt или директивы noindex.
• AMP-страница действительна (есть предупреждения)/Веб-история действительна (есть предупреждения). AMP-страница доступна для индексирования, но на ней работают не все функции. Возможно также, что она содержит устаревшие теги или атрибуты и поэтому может стать недействительной в дальнейшем.
• Не AMP-страница. На проверенной странице не используется технология AMP.

Для удобства отладки AMP-кода воспользуйтесь инструментом проверки AMP-страниц.

Расширенные результаты, обнаруженные на странице

Вам доступны сведения обо всех расширенных результатах (структурированных данных), найденных на странице, а именно о количестве активных элементов, их характере и наличии ошибок или предупреждений. Разверните Обнаруженные элементы, чтобы изучить отчет обо всех структурированных данных и ошибках, найденных на странице. Нажав на ошибку, вы сможете выяснить проблему с кодом.

В качестве интерактивного отладчика структурированных данных, в котором вы можете изменять и проверять структурированные данные, может выступать инструмент проверки расширенных результатов. Также он может служить средством просмотра некоторых типов структурированных данных.

На данный момент поддерживаются следующие типы расширенных результатов:

• Строка навигации
• Информация о курсе
• Набор данных
• Форум для обсуждений
• Вопрос по учебной программе
• Мероприятие
• FAQ
• Проверка фактов
• Гостиницы
• Метаданные изображений
• Вакансии
• Обучающее видео
• Математические сервисы.
• Информация о товарах продавца
• Практические задачи
• Описание товара
• Страница профиля
• Страница вопроса с ответами
• Рецепт
• Отзыв
• Окно поиска по сайту
• Специальное сообщение
• Контент, доступный по подписке
• Жилье для отпуска
• Списки автомобилей
• Video

В настоящее время поддерживаются не все расширенные результаты.

Иными словами, отдельные виды расширенных результатов могут быть реализованы на странице и появляться в результатах поиска, но отсутствовать в инструменте проверки URL.

Дополнительные данные из ответа

Чтобы посмотреть дополнительные данные из ответа (например, возвращенный необработанный HTML-код, HTTP-заголовки, данные из консоли JavaScript и загруженные ресурсы страницы), нажмите кнопку Изучить просканированную страницу.

Дополнительные данные из ответа доступны только для URL со статусом URL есть в индексе Google или URL есть в индексе Google, но есть проблемы.

Используемый тип поискового робота зависит от того, где вы открываете боковую панель.

• Если ее открыть на главной странице отчета или во вложенных отчетах об использовании протокола HTTPS или о структурированных данных в разделе Улучшения и удобство для пользователей, то тип поискового робота будет указан в разделе Доступность страницы > Просканировано > Робот, выполнивший сканирование.
• Если боковую панель открыть во вложенном отчете о статусе AMP-страниц, будет указан робот Googlebot для смартфонов.

Скриншот обработанной страницы доступен только при проверке ее опубликованной версии.

 

Проверка URL опубликованной страницы

Проверка URL опубликованной страницы вашего ресурса позволяет выявить ошибки индексирования, проанализировать использование структурированных данных и т. д. Такая проверка пригодится и при устранении неполадок на странице, когда нужно убедиться, что проблему удалось устранить.

Как проверить страницу на сайте на наличие ошибок индексирования

1. Выполните проверку URL. Внимание! Если страница ещё не была проиндексирована или проиндексировать ее не удалось, на текущем этапе это не является проблемой. Однако важно, чтобы выбранная страница была доступна любому пользователю интернета без авторизации.
2. Нажмите Проверить страницу на сайте.
3. Узнайте больше о том, как интерпретировать результаты проверки.
4. Вы можете переключаться между результатами проверки опубликованной на сайте страницы и ее проиндексированной версии при помощи кнопок Проверить опубликованную версию и Использовать данные из индекса Google.
5. Чтобы протестировать опубликованную версию повторно, нажмите кнопку "Обновить" .
6. Нажмите Изучить просканированную страницу, чтобы увидеть подробные сведения о странице, в том числе ее скриншот и HTTP-заголовки ответа.

Существует ограничение по числу проверок опубликованных страниц, которые можно выполнить на ресурсе в течение одного дня.

О результатах проверки опубликованной страницы

Ключевые моменты:

• Это проверка опубликованной версии страницы, которую наши алгоритмы анализируют в режиме реального времени. Результаты этого анализа могут отличаться от результатов проверки проиндексированной версии страницы по описанным ниже причинам.
• При анализе опубликованной страницы не проверяются ее присутствие в файлах Sitemap и наличие ссылающихся страниц.
• Проверка опубликованной версии не нацелена на выявление всех возможных проблем индексирования, в том числе когда страница является копией или альтернативной версией. Копии страниц не индексируются.
• При анализе опубликованной страницы невозможно проверить ее соответствие требованиям в области качества и безопасности, а также узнать, применяются ли к ней меры, принятые вручную, процедуры удаления контента или блокировки URL.
• Статус Индексируемая для текущей версии страницы на сайте может отличаться от статуса Доступность страницы для проиндексированной страницы по следующим причинам:
  • Вы что-то добавили или исправили на опубликованной странице (теги noindex, настройки блокировки в файле robots.txt), и роботы Google ещё не успели проиндексировать новую версию страницы. Чтобы определить разницу между проиндексированной и опубликованной версиями страницы, сравните результаты их проверки или просмотрите историю версий страницы на вашем сайте.
  • Проверка опубликованной версии поддерживает не все статусы индексирования, доступные при анализе проиндексированной версии. Некоторые данные, относящиеся к проиндексированной странице, нельзя получить при проверке опубликованной версии, а в отдельных случаях это не имеет смысла. Подробнее о неподдерживаемых статусах…
• При проверке система выполняет все перенаправления, а затем тестирует итоговую страницу. Однако в результатах вы не увидите перенаправлений и не сможете узнать конечный проверенный URL.

Если результат положительный, означает ли это, что страница будет проиндексирована?

Нет. Проверка опубликованной версии страницы означает только то, что страница доступна для индексирования роботами Googlebot. Не существует проверки, которая гарантированно покажет, будет ли ваша страница включена в индекс Google. Чтобы индексирование опубликованной страницы могло быть выполнено, страница должна соответствовать и другим критериям, например:

• К странице не должны быть применены никакие принимаемые вручную меры, и с ней не должно быть никаких проблем юридического характера.
• Страница не может быть дубликатом проиндексированной страницы, а должна быть либо уникальной, либо указанной в качестве канонической для набора похожих страниц.
• Качество страницы должно быть достаточно высоким.

 

В результатах проверки опубликованной страницы содержится следующая информация:

Общий статус опубликованной страницы

В верхней части отчета указывается, может ли URL опубликованной страницы быть добавлен в индекс. Положительный результат не гарантирует ее появления в результатах поиска, а лишь означает, что страница может быть просканирована и проанализирована. Инструмент проверки URL не учитывает меры, принятые вручную, удаление контента, проблемы безопасности и временную блокировку URL.

Внимание! Проверка опубликованной страницы не может выявить все возможные факторы, от которых зависит добавление контента в индекс. Пометка "Нет" в этой таблице означает, что условие не проверяется и может иметь место даже после добавления в индекс независимо от статуса URL опубликованной страницы.

Если на странице настроена переадресация, Google проверит конечный URL, никак не обозначая, что был выполнен переход на другую страницу или проверен другой URL. В отчете об индексировании будут показаны результаты по конечному URL.

Возможны следующие значения:

URL доступен Google

• Что это означает. Страница не заблокирована, а ошибки, препятствующие индексированию, отсутствуют. Если Google проиндексирует ее, она сможет появляться в результатах Google Поиска – при условии, что страница соответствует требованиям по качеству и безопасности, к ней не применены никакие меры, принятые вручную, а также процедуры удаления контента или блокировки URL. Подробнее о том, что не проверяется…
• Что можно предпринять. Если эта страница отличается от проиндексированной версии, вы можете запросить ее индексирование, нажав соответствующую кнопку. Вы также можете отправить файл Sitemap или дождаться автоматического сканирования.

URL доступен Google, но есть проблемы

• Что это означает. Страница может быть проиндексирована, однако на ней есть проблемы, которые могут привести к тому, что реализованные вами улучшения работать не будут. Это могут быть неполадки с AMP-страницами, связанными с канонической страницей, или неверный формат структурированных данных, например предназначенных для показа рецептов, вакансий или иных расширенных результатов. Подробнее о том, что не проверяется…
• Что можно предпринять. Изучите предупреждения или ознакомьтесь с представленными в инструменте сведениями об ошибках и устраните обнаруженные проблемы.

URL недоступен Google

• Что это означает. Страница не может показываться в результатах поиска из-за серьезной проблемы.
• Что можно предпринять. Ознакомьтесь с возможными причинами неполадки в разделе Доступность ниже.

Проверка опубликованной страницы: доступность

В этом разделе представлены сведения о том, может ли страница быть проиндексирована Google. Обратите внимание: положительный результат не гарантирует, что она появится в результатах поиска.

В ходе тестирования страница не проверяется на соответствие рекомендациям Google в отношении качества и безопасности. Также не учитываются меры, принятые вручную, удаление контента, проблемы безопасности и временная блокировка URL. Чтобы появиться в результатах поиска Google, ваша страница должна пройти все эти проверки.

Статус доступности

Статус доступности опубликованной страницы. Возможны следующие значения:

• URL можно проиндексировать: страница может быть добавлена в индекс, но это не значит, что она будет проиндексирована, потому что проверка не позволяет выявить всех возможных проблем.
• Посмотрите подробное описание статусов категории "Ошибка" или "Предупреждение".
• Страница недоступна из-за проблемы с сайтом: при наличии проблемы на всем сайте проверить опубликованную страницу невозможно. Описание этой проблемы приведено в поле Получение страницы.

Время

Момент времени, в который выполнялась проверка опубликованной страницы.

Робот, выполнивший сканирование

Тип агента пользователя, применявшегося при проверке.

Сканирование разрешено?

Значение этого параметра показывает, может ли Google просканировать (открыть) страницу или она заблокирована с помощью правила в файле robots.txt. Если вы не хотите блокировать роботу Googlebot доступ к ней, удалите соответствующее правило из файла robots.txt. Отменить запрет на доступ не значит предоставить право на индексирование. Теперь вам нужно перейти к полю Индексирование разрешено? и внести необходимые исправления. Ознакомьтесь с более подробной информацией.

Получение страницы

В этом поле содержится информация о том, удалось ли роботам Google получить доступ к странице на сервере. Если сканирование страницы запрещено, в этом поле будет указано, что оно не выполнено. По ряду причин страница может быть недоступна роботу, даже если ее сканирование разрешено. Прочитайте статью об ошибках, которые могут препятствовать получению страницы.

• Успешно – страницу удалось получить при индексировании.
• Ошибка, а также один из статусов непроиндексированных страниц или ошибка на уровне всего сайта.
• Внутренняя ошибка – произошла ошибка сканирования, которая не имеет отношения ни к одной из перечисленных проблем. Повторите попытку позже.
• Отсутствует – ошибка, которая не подпадает ни под одну из причин возникновения этого статуса. Это стандартное уведомление об ошибке, и, к сожалению, у нас нет другой информации.

Индексирование разрешено?

Сведения о том, разрешено ли индексирование страницы. Если оно запрещено, то в текущем поле будет указано, каким именно способом. В этом случае страница не будет показываться в результатах поиска Google. Внимание! Если доступ к странице заблокирован при помощи файла robots.txt (см. раздел "Сканирование разрешено?"), в поле "Индексирование разрешено?" всегда будет указано значение "Да", потому что робот Googlebot не сможет увидеть и принять к сведению директивы noindex. Поэтому страница может появляться в результатах поиска. Страница, на которой обнаружен атрибут или заголовок indexifembedded в сочетании с директивой noindex, будет проиндексирована, только если она встроена.

Каноническая страница, выбранная пользователем

Если на вашей странице явным образом указан канонический URL, он будет представлен здесь. Если страница не является копией другой страницы, в этом разделе может быть значение Нет, но это не считается проблемой. Если существует несколько альтернативных версий страницы, рекомендуется явным образом указывать канонический URL. Указать канонический URL можно с помощью тега <link rel="canonical">, HTTP-заголовка и файла Sitemap, а также другими способами. Мы не можем гарантировать, что будет выбран именно этот URL, но он будет учитываться. В случае с AMP-версиями в качестве канонического URL следует указывать обычный вариант страницы (если речь не идет об AMP-странице с канонической ссылкой на саму себя).

 

Какие проблемы с индексированием нельзя выявить при проверке опубликованной страницы

Проверка опубликованной страницы не позволяет выявить все условия, определяющие возможность индексирования, потому что некоторые проблемы нельзя обнаружить в режиме реального времени (например, узнать, какая страница выбрана канонической, указан ли URL в файле Sitemap и т. д.). Если условие не проверялось, то URL может быть помечен как доступный для Google, тогда как индексирование не будет выполняться из-за несоблюдения условий, которые не учитывались в ходе проверки опубликованной страницы.

Ниже описаны ошибки из отчета об индексировании страниц, которые нельзя выявить в ходе проверки опубликованной страницы.

• Индексирование страницы запрещено с помощью инструмента удаления URL. Проверить, так ли это, можно на вкладке Временные удаления.
• Страница просканирована, но пока не проиндексирована
• Страница обнаружена, не проиндексирована
• Вариант страницы с тегом canonical
  Страница является копией. Канонический вариант не выбран пользователем.
  Страница является копией. Канонические версии страницы, выбранные Google и пользователем, не совпадают.
  Страница является копией. Отправленный URL не выбран в качестве канонического –
  Google выбирает канонический вариант страницы при индексировании.
• Страница проиндексирована без контента

Прочие улучшения: AMP-страницы, структурированные данные

AMP-страницы

Подробная информация представлена в в разделе Проиндексированные AMP-страницы.

Какой URL проверяется?

Чтобы определить, какую AMP-страницу необходимо проверить, используется агент пользователя для компьютеров и обрабатываются все указанные на странице перенаправления. После этого:

• Если конечный URL ведет на AMP-страницу, будет выполнена его проверка.
• Если конечный URL ссылается на другую AMP-страницу, будет проверена эта страница.
• Если конечный URL не ведет или не ссылается на AMP-страницу, результаты проверки не будут содержать информации об AMP-страницах.

Структурированные данные

Подробная информация представлена в в разделе Проиндексированные AMP-страницы.

Проверка опубликованной страницы: дополнительные данные из ответа

Чтобы посмотреть дополнительные данные из ответа (например, скриншот обработанной страницы, возвращенный необработанный код HTML, HTTP-заголовки, данные консоли JavaScript и любые загруженные ресурсы страницы), нажмите на ссылку Посмотреть проверенную страницу.

При проверке опубликованной страницы дополнительные данные из ответа доступны только при ее статусе URL доступен Google или URL доступен Google, но есть проблемы.

Используемый тип поискового робота зависит от того, где вы открываете боковую панель.

• Если ее открыть на главной странице отчета или во вложенных отчетах об использовании протокола HTTPS или о структурированных данных в разделе Улучшения и удобство для пользователей, то тип поискового робота будет указан в разделе Доступность страницы > Просканировано > Робот, выполнивший сканирование.
• Если боковую панель открыть во вложенном отчете о статусе AMP-страниц, будет указан робот Googlebot для смартфонов.

Проблема с доступностью на всех страницах сайта

Если статус доступности опубликованной страницы указывает на наличие проблемы на уровне всего сайта, в поле Получение страницы возможны следующие значения:

• DNS-сервер не отвечает. Зачастую эта проблема носит временный характер и через несколько минут исчезает сама.
• Ошибка DNS: неизвестный хост. DNS-серверу не удалось распознать указанный вами URL. Во многих случаях эта проблема носит временный характер и через несколько минут исчезает сама.
• Ошибка DNS: возвращен частный IP-адрес. DNS-сервер вернул IP-адрес, который относится к специальному или частному диапазону адресов, например частный IP-адрес по стандарту RFC 1918 (такой как 10.0.0.1).
• Не удалось подключиться к серверу. С сервером не удалось связаться, он отклонил соединение, или к нему невозможно подключиться. Подробнее…
• Недопустимый ответ сервера. Сервер не поддерживает используемый в запросе протокол, его ответ или заголовки усечены, либо ответ не удалось проанализировать (например, если сжатие данных в ответе было выполнено некорректно). Подробнее…
• Недопустимый SSL-сертификат сервера. SSL-сертификат вашего сервера является недействительным. В таких случаях Google не выполняет проверку опубликованного на сайте URL с протоколом HTTPS.
• Невозможно получить доступ к файлу robots.txt. Google не выполняет сканирование сайта, если файл robots.txt на нем есть, но обработать его нельзя. Чтобы проверить, есть ли у роботов Google доступ к файлу robots.txt, изучите отчет о статистике сканирования.
• Превышена нагрузка на хост. Ваш сайт перегружен и не может обработать запросы Google на проверку или сканирование. Google не будет выполнять проверки, пока наши измерения не покажут, что на вашем сайте снизился трафик.

Обратите внимание, что ошибки сервера могут носить временный характер и проявляться только в ходе проверки опубликованной страницы или, наоборот, только в ходе сканирования.

Просмотр обработанной страницы

Вы можете посмотреть скриншот отрисованной страницы и таким образом узнать, как робот Googlebot воспринимает ее. Это позволит вам убедиться, что все элементы страницы размещены корректно и выглядят так, как вам нужно. Если встречаются расхождения, они могут быть связаны с тем, что роботу Googlebot запрещен доступ к определенным ресурсам.

Скриншоты доступны только для тех опубликованных страниц, проверка которых прошла успешно. Если URL уже добавлен в индекс или при проверке не удалось получить страницу по этому URL, то скриншот создан не будет. Если доступа к URL нет, получить скриншот не удастся. Если страница защищена брандмауэром, вы можете сделать ее доступной для инструмента проверки URL, используя туннель.

Как посмотреть обработанную страницу

1. Протестируйте главную страницу сайта.
2. На странице с результатами индексирования нажмите Проверить страницу на сайте.
3. Чтобы открыть дополнительные информационные панели, нажмите Изучить проверенную страницу на карточке с результатами проверки. Если эта функция недоступна, скорее всего, к странице нет доступа.
4. Перейдите на вкладку Скриншот.

Запрос (повторного) индексирования

Инструмент проверки URL позволяет запросить индексирование страницы роботом Googlebot и узнать, на какой стадии находится эта процедура (она может занять одну-две недели).

Примечания

• Обычно для индексирования требуется около одного дня, но в некоторых случаях может понадобиться больше времени.
• Отправка запроса не гарантирует появления страницы в индексе Google.
• Число запросов индексирования, которые вы можете отправить за один день, ограничено. Если вам нужно, чтобы было проиндексировано несколько страниц, отправьте в Google файл Sitemap.

Как отправить запрос:

1. Проверьте URL страницы.
2. Нажмите Запросить индексирование на странице с результатами проверки. В случае отсутствия очевидных ошибок страница будет добавлена в очередь. Если при проверке опубликованной страницы обнаружится, что проиндексировать ее невозможно, то запросить индексирование будет нельзя.

Чтобы запросить индексирование нескольких новых или измененных страниц, лучше всего отправить файл Sitemap, отметив обновленные страницы с помощью тега <lastmod>.

Устранение неполадок со страницей, отсутствующей в поиске

Ниже описывается, что делать, если вы считаете, что страница не была проиндексирована.

1. Проверьте статус индексирования страницы. Для этого вставьте URL в поле проверки или нажмите кнопку проверки в одном из отчетов Search Console (чтобы увидеть эту кнопку, наведите курсор на URL).
2. Предварительные результаты проверки показывают, какая информация о странице есть в индексе Google. Эти данные используются при показе контента в Google Поиске. Примечание. В данном случае речь не идет о проверке URL опубликованной страницы. Эту тему мы рассмотрим позднее.
   • Если статус URL начинается со слов "URL есть в индексе Google", значит, страница должна быть доступна в Google Поиске. Чтобы проверить это, введите в строке поиска ее адрес. Если страницы нет в результатах поиска, выполните следующие действия:
     • Откройте отчеты Меры, принятые вручную и Проблемы безопасности: в них могут быть указаны причины, по которым страница не попадает в результаты поиска.
     • Проверьте, не была ли страница кем-либо временно заблокирована.
     • Если в результате этих действий выявить проблему не удалось, продолжите отладку, как описано здесь.
   • Если из статуса ясно, что URL недоступен Google или его нет в индексе Google, откройте раздел Доступность.
     • В заголовке раздела "Доступность" должно быть кратко указано, почему URL не был добавлен в индекс. Сведения о возможных ошибках при индексировании и способах их устранения представлены в Справочном центре. Если URL неизвестен Google, значит, алгоритмы Google не сканировали его, и вам нужно запросить индексирование страницы. Эта процедура, как правило, занимает несколько дней.
     • Если в поле Сканирование разрешено? указано "Нет", значит файл robots.txt запрещает роботам Google сканировать страницу. Подробнее о том, как об этом узнать и что в подобных случаях можно предпринять…
     • Если в поле Индексирование разрешено? указано "Нет", значит, ваш сайт возвращает тег или заголовок noindex, тем самым блокируя добавление страницы в индекс и результаты поиска Google. Чтобы Google проиндексировал ее, удалите этот тег или заголовок.
3. Если вы изменяли страницу после указанного времени сканирования, вы можете проверить ее текущую версию, нажав кнопку Проверить страницу на сайте. Не все проблемы, препятствующие индексированию страницы, можно выявить в ходе такой проверки. Но если вверху экрана указан статус "Страница без ошибок", значит, она может быть проиндексирована.

Известные проблемы

• В отдельных случаях в отчет не включаются данные по файлу Sitemap для страницы, добавленной с помощью файла Sitemap. Мы работаем над решением этой проблемы.
• Информация о проверяемой странице, включая ее скриншот, берется с ее мобильной версии, даже если имеется действительная связанная с ней AMP-версия.