С помощью отчета о файлах Sitemap вы можете сообщить Google о появлении новых карт вашего сайта, посмотреть историю отправки файлов Sitemap, а также узнать об ошибках, с которыми столкнулась наша система при анализе файла Sitemap.
Открыть отчет о файлах Sitemap
Что такое файл Sitemap? Будет ли мне полезен этот отчет?
Файл Sitemap содержит информацию о страницах сайта, на котором он размещен, и помогает Google определять, какие страницы нужно просканировать.
- Если вы пользуетесь сервисом веб-хостинга (Squarespace, Wix и т. п.), то в нем файл Sitemap может формироваться автоматически. В таком случае вам не нужно создавать его вручную или прибегать к помощи отчета, о котором идет речь. Поищите сведения о файлах Sitemap в справочных материалах своего хостинг-провайдера.
- Если у вас небольшой сайт (меньше 100 страниц), а по его ссылкам можно перейти от главной страницы к любой другой на нем, то файлы Sitemap и отчет о них вам не нужны. Достаточно запросить индексирование главной страницы. При использовании сервиса веб-хостинга, как уже было сказано выше, никакие действия не требуются.
Подробнее о файлах Sitemap…
Управление файлами Sitemap
Инструкции
- Вы сможете отправить файл Sitemap с помощью отчета, только если у вас есть права владельца ресурса. Если таких прав у вас нет, добавьте ссылку на файл Sitemap в файл robots.txt.
- Опубликуйте файл Sitemap на своем сайте.
- Файл должен быть создан в одном из подходящих форматов. Придерживайтесь рекомендаций относительно синтаксиса, расположения файла и т. д.
- Советуем разместить файл Sitemap на корневом уровне вашего сайта. Если же вы используете сервис веб-хостинга (например, Blogger, Wix или GoDaddy), изучите справочные материалы этого сервиса, чтобы узнать, куда и как добавить файл и есть ли в нем необходимость.
- Проверьте файл Sitemap на наличие синтаксических ошибок с помощью XML-генератора.
- Проверьте, есть ли у Google доступ к файлу Sitemap. Убедитесь, что доступ робота Googlebot к файлу Sitemap не заблокирован и для него не требуется авторизация. Чтобы проверить, так ли это, воспользуйтесь инструментом проверки URL. В поле Получение страницы должно быть указано "Успешно".
- Откройте отчет о файлах Sitemap, скопируйте URL, который проверяли на этапе 3, вставьте его в окно Добавьте файл Sitemap и нажмите Отправить.
- Файл Sitemap сразу же будет получен, однако сканирование перечисленных в нем URL может занять некоторое время. Возможно, что из-за трафика, размера сайта и других факторов его не удастся обработать полностью.
- Если статус файла Sitemap отличен от Успешно, нажмите на строку в отчете, чтобы посмотреть сведения о сбое. Также рекомендуем ознакомиться с информацией об ошибках ниже.
Время от времени проверяйте, может ли Google получать и обрабатывать ваши файлы Sitemap.
Как повторно отправить в Google файл Sitemap
Как удалить файл Sitemap
Если вы удалите файл Sitemap, он исчезнет из отчета, но Google запомнит его и все перечисленные в нем URL. Если вам нужно, чтобы роботы Google перестали посещать ваши веб-страницы, запретите им это с помощью правила в файле robots.txt.
Чтобы удалить файл Sitemap, выполните следующие действия:
- В основной таблице отчета найдите файл, который нужно удалить, и нажмите на него.
- На странице сведений о файле нажмите на значок в виде трех точек
.
- Выберите Удалить файл Sitemap.
- Чтобы роботы Google больше не обращались к файлу Sitemap и перечисленным в нем страницам, воспользуйтесь любым из приведенных ниже способов.
- Запретите доступ к файлу Sitemap и страницам с помощью правила в файле robots.txt.
- Удалите файл Sitemap или страницу с сайта.
- Добавьте правило noindex или заголовок ответа. Для файла Sitemap необходимо использовать заголовок ответа, для веб-страницы – метатег или заголовок ответа.
.Расписание сканирования файлов Sitemap
Google попытается обработать файл Sitemap, как только вы его отправите. В случае успеха повторная обработка будет выполняться вне обычного расписания, в соответствии с которым сканируется ваш сайт.
Если при получении или обработке файла Sitemap произойдет сбой, то Google продолжит попытки в течение нескольких дней. Если проблема не будет устранена, Google прекратит попытки просканировать этот URL. Проблемы, затрагивающие отдельные URL в файле Sitemap, не помешают Google продолжить обработку файла, если он в принципе может быть получен и обработан.
Как интерпретировать отчет
- На странице отчета о файлах Sitemap можно посмотреть статусы запросов Google для всех файлов Sitemap, отправленных с помощью этого отчета или API. В отчете отображается статус последнего запроса для каждого файла Sitemap. Каждому файлу Sitemap будет присвоено одно из следующих значений, которое показывает статус последнего запроса:
- Успешно – файл Sitemap получен и обработан без ошибок.
- Не получено – Google не удалось получить файл Sitemap.
- Обнаружены проблемы (X) – файл Sitemap получен и частично обработан, однако содержит некоторые ошибки.
- Нажмите на отдельный файл Sitemap, чтобы открыть страницу сведений, на которой указана информация о файле Sitemap и запрос.
- Если на странице сведений указано Не удалось обработать файл Sitemap, значит, получить файл не удалось по одной из этих причин. Разверните раздел, который расположен под ошибкой, чтобы посмотреть сведения о ней. Устраните проблему и отправьте файл Sitemap ещё раз. Если получить файл Sitemap не удастся, Google попытается ещё несколько раз, но в конечном итоге прекратит попытки обработать его.
- Если на странице сведений указано При обработке файла Sitemap обнаружены ошибки, появится список этих ошибок. Разверните раздел под ошибкой, чтобы посмотреть сведения о ней. В этом разделе приводятся описания ошибок и рассказывается, как их исправить.
Важно!
- В отчете видны только файлы Sitemap, отправленные с помощью этого отчета или специального API, а не обнаруженные по ссылкам в файле robots.txt или другими способами. Тем не менее, если мы уже получили ваш файл Sitemap из другого источника, вы все равно можете отправить его нам через этот отчет, чтобы следить за тем, как мы сканируем ваши страницы.
- В отчете показаны только файлы Sitemap, относящиеся к текущему ресурсу. Если вы не можете найти конкретный файл, убедитесь, что не перепутали ресурсы с префиксами http и https или с элементом www и без него.
- Если файл Sitemap не удастся получить с нескольких попыток, Google в конечном итоге прекратит их. Вы должны исправить ошибки и отправить файл ещё раз.
- Если Google удалось обработать файл Sitemap, информация об этом будет сохранена. Дальнейшие удачные или неудачные обработки не приведут к тому, что Google "забудет" о предыдущих обработках. Однако новая информация о том или ином URL будет перезаписана поверх старой информации об этом URL.
- В файле Sitemap можно указывать URL изображений, видео и новостных статей. Однако в настоящее время в отчете не отображаются сведения о таких URL.
- В отчете будет не более 1000 отправленных запросов (причем не в хронологическом порядке), даже если вы добавите запросы сверх этого количества. Сейчас в Search Console нет возможности посмотреть запросы, не вошедшие в первую тысячу.
Для каждого файла Sitemap указывается следующая информация:
- URL файла Sitemap
- Точный URL, который указывается при отправке файла Sitemap. Переадресация не выполняется. Здесь показываются только файлы, отправленные с помощью этого отчета или API.
- Тип
- Тип файла Sitemap. Возможные значения:
- Sitemap – текстовый файл или файл в формате XML.
- Файл индекса Sitemap – файл с информацией о других файлах Sitemap.
- RSS – RSS-фид.
- Atom – фид Atom.
- Неизвестно – файл имеет неизвестный формат или ещё не обработан.
- Отправлен
- Дата, когда файл Sitemap был последний раз отправлен в Google.
- Дата последней обработки
- Дата, когда файл Sitemap был последний раз обработан инструментами Google. Указывается, только если мы получили файл.
- Статус
- Статус последнего сканирования. Возможные значения:
- Успешно – файл Sitemap загружен и обработан без ошибок. Все URL добавлены в очередь на сканирование.
- Обнаружены проблемы – файл Sitemap содержит ошибки, однако все URL, которые удалось из него извлечь, добавлены в очередь на сканирование. Нажмите на файл в таблице, чтобы увидеть список ошибок. Полный список ошибок при обработке приведен ниже.
- Не получено – не удалось получить файл Sitemap. Узнайте, как устранить ошибки при получении.
- Количество выявленных страниц
- Количество URL страниц, перечисленных в файле Sitemap. Если это файл типа "индекс Sitemap", то здесь указывается общее количество URL во всех включенных в него файлах. Повторяющиеся URL засчитываются только один раз. Мы не гарантируем, что эти URL были или будут просканированы или проиндексированы Google. Отфильтруйте Отчет об индексировании страниц по файлу Sitemap, чтобы узнать, сколько URL страниц было проиндексировано.
- Количество выявленных видео
- Количество URL видео, перечисленных в файле Sitemap. Мы не гарантируем, что эти URL были или будут просканированы или проиндексированы Google. Отфильтруйте Отчет об индексировании страниц с видео по файлу Sitemap, чтобы узнать, сколько URL страниц содержат видео, которое было проиндексировано. Обратите внимание, что в Search Console не указано, был ли на странице проиндексирован URL видео, отличный от URL видео в файле Sitemap. Файл Sitemap, указанный здесь, будет ссылаться на Отчет об индексировании страниц с видео, если он содержит проиндексированные страницы, на которых были обнаружены видео при сканировании Google.
Посмотреть отчет об индексировании- Нажав на этот значок, вы получите отчет об индексировании всех URL в этом файле Sitemap. В случае с индексом Sitemap в отчет попадут все просканированные URL, которые были перечислены в дочерних файлах Sitemap.
Посмотреть отчет об индексировании
Моего файла Sitemap нет в списке
Вот несколько причин, по которым файл Sitemap может отсутствовать в отчете:
- Он относится к другому ресурсу. Файлы Sitemap, связанные с одним ресурсом, не видны при выборе другого. Например, файлы, предназначенные для сайта
http://example.com, не будут представлены в отчете о ресурсеhttp://m.example.comилиhttps://example.com. Убедитесь, что вы добавили все версии URL своего сайта. - Вы не отправляли файл Sitemap с помощью интерфейса отчета или Search Console API. Файлы, обнаруженные или добавленные другим способом, не показываются в отчете, даже если Google может находить и использовать их.
Ошибки в файлах Sitemap
В отчете по файлам Sitemap может появляться информация об ошибках, перечисленных ниже. Этот список не является полным, но он достаточно длинный и охватывает большинство ошибок, с которыми вы можете столкнуться.
- Файл Sitemap заблокирован с помощью файла robots.txt. Google учитывает информацию из файла robots.txt. Удалите правило, которое препятствует получению файла Sitemap.
- В отношении вашего сайта действуют меры, принятые вручную. В этом случае файлы Sitemap не обрабатываются. Изучите отчет о мерах, принятых вручную. Устраните проблему и отправьте файл Sitemap ещё раз.
- Для файла Sitemap предоставлен неверный URL (ошибка HTTP 404: файл Sitemap не найден по указанному адресу). Попробуйте открыть URL в браузере, чтобы проверить, существует ли он.
- Другие общие ошибки. Иногда Google не удается получить файл Sitemap с вашего сайта из-за других ошибок, например недоступности сервера. Некоторые проблемы могут носить краткосрочный характер. Подождите немного и посмотрите, будет ли эта ошибка повторяться при следующих попытках сканирования.
- URL из вашего файла Sitemap сканируются редко. Причина может быть в низком качестве вашего контента. Как создавать высококачественный контент
Как анализировать ошибки с получением
- Нажмите на файл Sitemap в списке, чтобы посмотреть сведения о последнем запросе на получение.
- Нажмите на название ошибки, чтобы посмотреть сведения о ней.
- Подтвердите ошибку в инструменте проверки URL.
- Скопируйте URL файла Sitemap со страницы сведений отчета о файлах Sitemap.
- Вставьте URL в инструмент проверки URL и нажмите Ввод.
- Нажмите Выполнить проверку.
- Разверните раздел Доступность страницы, чтобы узнать, почему Google не удалось получить файл Sitemap. Информацию обо всех полях можно найти на этой странице. Для вас важно, чтобы в поле Сканирование разрешено? было указано "Да", в поле Получение страницы – "Успешно".
Ниже перечислены ошибки, которые могут произойти при обработке полученных файлов Sitemap.
URL недоступны
Google не удалось просканировать адреса из файла Sitemap. Проверьте, доступны ли URL в нем нашему роботу, с помощью этого инструмента.
Переход по URL не выполнен
Google не удалось просканировать все URL, указанные в файле Sitemap. Возможные причины:
- При переходе по URL слишком много раз выполняется переадресация, и поисковые роботы Google останавливаются, не достигая цели. Рекомендуем заменить все URL переадресации на адреса непосредственно тех страниц, которые нужно просканировать.
- Если вы все время применяете переадресацию с одной страницы на другую, используйте постоянную переадресацию.
- Рекомендуем отказаться от переадресации с помощью JavaScript или метатега refresh.
- Роботам Google не удается просканировать относительные URL в вашем файле Sitemap. По возможности используйте абсолютные ссылки вместо относительных. Например, для перехода на другую страницу своего сайта указывайте URL
https://www.example.com/mypage.html, а не простоmypage.html.
Нельзя использовать URL
Некоторые из перечисленных вами URL находятся в другом домене или на более высоком уровне по сравнению с файлом Sitemap.
Более высокий уровень. Если файл расположен по адресу http://www.example.com/mysite/sitemap.xml, то недействительны следующие URL:
http://www.example.com/– находится на более высоком уровне, чем файл Sitemap;http://www.example.com/yoursite/– находится в соседнем каталоге (необходимо перейти на более высокий уровень, а затем на более низкий).
Другой домен. Убедитесь, что все URL начинаются с того же домена, в котором хранится ваш файл Sitemap. Например, если файл расположен по адресу http://www.example.com/sitemap.xml, то недействительны следующие URL:
http://example.com/– отсутствует www в начале.www.example.com/– нет префикса протокола (http).https://www.example.com/– указан префикс протокола https вместо http.
Ошибка сжатия
Произошла ошибка при попытке восстановить сжатый файл Sitemap. Выполните повторное сжатие файла (например, с помощью gzip), после чего загрузите его на сайт и повторно отправьте в Google.
Пустой Sitemap
В файле Sitemap отсутствуют URL. Исправьте это.
Превышен максимальный размер файла Sitemap
Размер файла Sitemap в несжатом виде превышает 50 МБ. Разбейте его на несколько файлов и укажите их в индексе Sitemap, а затем отправьте нам этот индекс.
Неверное значение атрибута
У атрибута в теге XML недопустимое значение. Проверьте файлы Sitemap и убедитесь, что в них есть все необходимые атрибуты с действительными значениями (согласно техническим требованиям к таким файлам), а также что отсутствуют опечатки.
Неправильно введена дата
Как минимум одна дата в файле Sitemap имеет неверный формат или значение. Даты должны быть в формате кодировки даты и времени W3C. Время можно не указывать. Введите все даты в одном из допустимых форматов W3C:
2005-02-21 2005-02-21T18:00:15+00:00
Время задавать не требуется (по умолчанию устанавливается значение 00:00:00Z), однако, если вы все же делаете это, не забудьте указать часовой пояс.
Недопустимое значение тега
В файле Sitemap содержится один или несколько тегов с недопустимым значением. Проверьте спецификации для соответствующего типа файла Sitemap (индекс, стандартный, видео и т. п.).
Недопустимый URL
В файле Sitemap указан недействительный URL. Возможно, он содержит недопустимые символы (пробелы, кавычки и т. д.) или ошибки, например имеет префикс htp:// вместо http://.
Убедитесь, что URL в файле Sitemap указаны в правильной кодировке и должным образом экранированы. Проверьте, нет ли недопустимых символов, таких как пробелы и кавычки. Кроме того, можно вставить URL в браузер и посмотреть, будет ли загружена страница.
Неполные URL в файле индекса Sitemap
Для некоторых файлов Sitemap, перечисленных в файле индекса Sitemap, не указаны полные URL. Google выполняет поиск файлов Sitemap в том же каталоге, в котором находится индекс. Например, если индекс расположен по адресу http://www.example.com/folder1/sitemap_index.xml и указывает на файл sitemap.xml (без символа / впереди), то Google ищет этот файл Sitemap по адресу http://www.example.com/folder1/sitemap.xml. Если найти его не удается, показывается сообщение об ошибке.
Добавьте в индекс Sitemap полные URL всех нужных файлов Sitemap и отправьте его ещё раз.
Недопустимый XML: слишком много тегов
В файле Sitemap имеются повторяющиеся теги. Например, следующая запись станет причиной ошибки, поскольку тег <loc> повторяется в ней дважды:
<url> <loc>http://www.example.com/</loc> <loc>http://www.example.com/page1.html</loc> <lastmod>2005-01-01</lastmod> <changefreq>monthly</changefreq> <priority>0.8</priority> </url>
В сообщении об ошибке указываются тег и номер строки, в которой он находится. Удалите повторяющийся тег и отправьте файл Sitemap ещё раз.
Отсутствует атрибут XML
В одном из тегов в файле Sitemap отсутствует обязательный атрибут. Просмотрите файлы Sitemap и убедитесь, что все обязательные атрибуты на месте. Исправьте найденные ошибки в значениях атрибутов и ещё раз отправьте файл Sitemap.Отсутствует тег XML
В одной или нескольких записях в файле Sitemap отсутствует обязательный тег. В сообщении об ошибке указывается номер строки, с которой связана проблема. Сведения об обязательных тегах можно найти в этой статье.
Отсутствует URL значка видео
В некоторых записях о видео нет ссылки на значок. Убедитесь, что в тегах <video:thumbnail_loc> указаны URL всех значков видео.
Отсутствует название видео
В некоторых записях о видео отсутствует название. Убедитесь, что в тегах <video:title> указаны названия всех видео.
Вложенные файлы индекса Sitemap
В одной или нескольких записях файла индекса Sitemap указан его собственный URL или URL другого файла индекса Sitemap. Файл индекса Sitemap может содержать ссылки только на обычные файлы Sitemap, а не на индексы.
Удалите записи, указывающие на индексы Sitemap, и повторно отправьте файл.Ошибка синтаксического анализа
Google не удалось выполнить синтаксический анализ XML-контента вашего файла Sitemap.
Зачастую это происходит из-за неэкранированных символов в URL. Во всех файлах XML в любых значениях данных (включая URL) необходимо экранировать символы &, ', ", <, > и некоторые другие. Проверьте, правильно ли выполнено экранирование в URL.
Временная ошибка
Файл Sitemap не удалось обработать из-за временной ошибки системы. Как правило, при этой ошибке отправлять файл заново нет необходимости. Робот Google попробует получить его позже. Если это сообщение об ошибке будет отображаться даже через несколько часов, отправьте файл Sitemap ещё раз.
Слишком много файлов Sitemap
В файле индекса упомянуто более 50 000 файлов Sitemap. Разделите его на несколько, в каждом из которых должно быть указано не более 50 000 файлов Sitemap.
Слишком много URL
В файле Sitemap упомянуто более 50 000 URL. Разделите его на несколько, в каждом из которых должно быть указано до 50 000 адресов. Для удобства можно создать файл индекса Sitemap.
Неподдерживаемый формат файла
Вы создали некорректный файл.
Чтобы избежать самых частых ошибок XML, проверьте следующее:
- В файлах Sitemap должны быть правильные заголовки. Например, если файл содержит информацию о видео, заголовок должен быть следующим:
<?xml version="1.0" encoding="UTF-8"?> <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" xmlns:video="http://www.google.com/schemas/sitemap-video/1.1">
- Пространство имен в заголовке должно иметь вид http://www.sitemaps.org/schemas/sitemap/0.9 (не .9).
- Все атрибуты XML нужно заключать в одинарные (') или двойные (") кавычки, которые должны быть только прямыми. Обратите внимание, что текстовые редакторы, например Microsoft Word, могут автоматически менять кавычки на фигурные.
Несоответствующий путь: отсутствует префикс www
В пути к файлу Sitemap нет префикса www (пример: http://example.com/sitemap.xml), однако этот префикс есть в URL, которые перечислены в файле (пример: http://www.example.com/myfile.html).
Удалите префикс www из всех URL внутри файла.
Несоответствующий путь: имеется префикс www
В пути к файлу Sitemap есть префикс www (пример: http://www.example.com/sitemap.xml), однако этого префикса нет в URL, которые перечислены в файле (пример: http://example.com/myfile.xml).
Добавьте префикс www во все URL внутри файла.
Неправильно указано пространство имен
В корневом элементе файла Sitemap неверно задано или отсутствует пространство имен, содержится орфографическая ошибка или неправильный URL.
Убедитесь, что пространство имен задано правильно с учетом типа файла. Ниже приведены примеры.
- Файл Sitemap:
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" - Файл Sitemap для видео:
xmlns:video="http://www.google.com/schemas/sitemap-video/1.1" - Файл индекса Sitemap:
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"> - Другие типы файлов Sitemap
Файл Sitemap начинается с пробела
Ваш файл Sitemap начинается с пробела, а не с объявления пространства имен. Файлы XML должны начинаться с декларации XML, в которой указана используемая версия XML.
Указанная проблема не помешает Google обработать ваш файл Sitemap, однако лучше удалить пробел, чтобы файл соответствовал стандарту XML и сообщение об этой ошибке больше не появлялось.
Ошибка HTTP [код ошибки]
При попытке скачать файл Sitemap произошла ошибка HTTP уровня 400. В сообщении о ней будет указан код статуса (например, 404). Убедитесь, что URL файла Sitemap записан верно и файл находится в указанном месте. Затем повторно отправьте его в Google.
Общая ошибка HTTP
Произошла ошибка HTTP, которую невозможно отнести ни к одной из приведенных в этом списке. Разверните сведения, чтобы узнать тип ошибки. Это также может быть вызвано ошибкой 404 (страница отсутствует), которая является ошибкой при выполнении запроса.
Слишком большой значок видео
Значок видео, указанный в файле Sitemap, слишком велик. Измените его размер до 160 x 120 пикселей. При необходимости обновите файл Sitemap и повторно отправьте его в Google. Подробнее о том, как добавить в файл Sitemap информацию о видео…
Слишком маленький значок видео
Значок видео, указанный в файле Sitemap, слишком мал. Измените его размер до 160 x 120 пикселей. При необходимости обновите файл Sitemap. Подробнее о том, как добавить в файл Sitemap информацию о видео…
Адреса видео и страницы воспроизведения совпадают
URL видео и страницы проигрывателя, указанные в файле Sitemap для видео, не должны совпадать. Если используются одновременно тег <video:player_loc> и тег <video:content_loc>, то URL в них должны различаться. Подробнее о том, как добавить в файл Sitemap информацию о видео…
URL видео указывает на страницу воспроизведения
URL в теге <video:content_loc> в файле Sitemap для видео указывает на страницу, где размещен проигрыватель. Подробнее о том, как добавить в файл Sitemap информацию о видео…
Слишком много URL новостей
Количество URL в файле Sitemap превышает максимально допустимое значение (1000). Подробнее о том, как добавить в файл Sitemap информацию о новостях…
Отсутствует тег <publication>
Для каждого URL в файле Sitemap для Google Новостей должен быть указан тег <publication>. Подробнее о том, как добавить в файл Sitemap информацию о новостях…
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt
Роботу Google не удалось обработать файл Sitemap, поскольку доступ к нему или его содержанию запрещен в файле robots.txt. Воспользуйтесь инструментом проверки URL, чтобы выяснить, на какой именно файл влияет блокировка доступа, и измените директивы robots.txt.
