На странице настроек массового экспорта данных в Search Console вы можете запустить или остановить
массовый экспорт из Search Console в BigQuery, а также посмотреть статус последней попытки экспорта, выполненной после того, как был настроен экспорт данных по расписанию.
Управление массовым экспортом данных*
* Чтобы открыть страницу настроек массового экспорта данных, зайдите в Настройки ресурса > Массовый экспорт данных.
Для того чтобы запустить или остановить массовый экспорт данных в Search Console, необходимо иметь права владельца ресурса.
Подробнее о том, как запустить массовый экспорт данных…
Для того чтобы запустить или остановить массовый экспорт данных в Search Console, вы должны быть владельцем проекта.
Чтобы остановить текущий процесс массового экспорта данных, выполните следующие действия:
- Откройте страницу настроек массового экспорта данных.
- Нажмите Прервать экспорт.
- Подтвердите действие.
- Массовый экспорт данных будет прекращен в течение 24 часов. Это означает, что до полного прекращения массового экспорта данных по расписанию может быть выполнена ещё одна операция экспорта. Если вы хотите, чтобы экспорт данных был прерван незамедлительно, вы можете отозвать разрешения у субъектов Search Console в вашем проекте Google Cloud, выбрав IAM и администрирование > IAM > Разрешения > Просмотр по субъектам.
- Существующие таблицы не будут удалены, и вы сможете пользоваться ими в BigQuery.
- Перезапустить остановленный ранее массовый экспорт данных можно в любое время, предварительно убедившись, что настройки доступа в вашем целевом проекте Google Cloud Console не изменились.
Для того чтобы запустить или остановить массовый экспорт данных в Search Console, вы должны быть владельцем проекта.
Чтобы повторно запустить ранее остановленный массовый экспорт данных,
- следуйте инструкциям ниже.
- Для продолжения работы с тем же проектом и набором данных используйте предыдущий идентификатор проекта в Google Cloud и то же местоположение набора данных.
- Чтобы экспортировать данные в новое место, следуйте инструкциям по настройке Google Cloud Console и используйте заданные значения при настройке экспорта.
- При экспорте в существующее местоположение данные будут добавлены в таблицы, которые использовались ранее (при их наличии). Если эти таблицы были удалены, Search Console создаст новые.
В Search Console можно просматривать статус последней попытки экспорта данных.
Для этого откройте Настройки и просмотрите статус рядом с элементом Массовый экспорт данных.
Нажмите на него, чтобы перейти на страницу настроек массового экспорта данных и ознакомиться с подробными сведениями. Если при экспорте данных возникнет серьезная проблема, вы получите уведомление. Ознакомьтесь со списком возможных ошибок и способами их исправления.
Постарайтесь как можно быстрее решить проблему, так как в противном случае по прошествии недели Search Console перестанет предпринимать попытки экспорта данных за указанную дату, а примерно через месяц полностью прекратит массовый экспорт данных.
В Search Console отображается статус только последней попытки экспорта. Чтобы посмотреть его, откройте страницу настроек массового экспорта данных для вашего проекта.
Если вы хотите увидеть все успешные операции экспорта, откройте таблицу журнала регистрации, содержащую информацию об операциях массового экспорта ваших данных.
В Search Console нельзя посмотреть неудачные попытки экспорта, за исключением последней.
Изменение местоположения набора данных
- Остановите массовый экспорт данных и подождите 24 часа, чтобы успели сохраниться последние данные.
- Убедитесь, что последняя операция экспорта прошла успешно.
- Скопируйте набор данных в новое место.
- Запустите новый процесс массового экспорта данных в новое местоположение.
Экспорт данных
Процесс экспорта
После того как вы запустите массовый экспорт данных, Search Console будет ежедневно экспортировать данные за каждый день до тех пор, пока вы не остановите этот процесс. Время экспорта данных может быть разным. При этом в экспортируемых данных не должно быть никаких пропущенных периодов.
Если во время экспорта данных возникнет серьезная ошибка, Search Console попробует выполнить экспорт на следующий день согласно расписанию, включая данные, которые не были экспортированы. Search Console хранит эти данные примерно неделю. Затем они удаляются, но Search Console продолжит (пытаться) экспортировать ваши данные.
Отслеживание и устранение ошибок, связанных с массовым экспортом данных
Отслеживание ошибок экспорта
Если во время экспорта в какой-либо из таблиц возникает ошибка, а также при устранении этой ошибки Search Console отправляет уведомления по электронной почте всем владельцам ресурса и пользователям с правом полного доступа (эти сообщения также доступны на панели сообщений вашего проекта). При получении уведомления об ошибке во время массового экспорта данных откройте страницу настроек массового экспорта данных для вашего проекта, чтобы посмотреть статус операции экспорта и подробные сведения о ней. Search Console не направляет уведомления о незначительных ошибках (таких как ошибка подключения к серверу).
Все серьезные ошибки, возникшие во время последней попытки экспорта, отображаются на странице настроек массового экспорта данных в Search Console.
Помните, что ошибки экспорта не записываются в таблицу ExportLog в BigQuery. Дополнительную информацию об ошибках можно найти в интерфейсе просмотра журналов в Google Cloud. Чтобы выявить подходящие действия, найдите текст search-console-data-export.
Проверка устранения ошибки
После устранения ошибки, отображающейся на странице настроек массового экспорта данных, нажмите Проверка настроек, чтобы проверить легко тестируемые настройки (такие как корректность названия проекта и настройки доступа в Google Cloud). Успешная проверка не приводит к запуску экспорта данных (который осуществляется согласно расписанию). Она также не гарантирует того, что ошибка не произойдет повторно при следующей попытке экспорта, поскольку некоторые условия, такие как квота, не тестируются. Поэтому мы рекомендуем примерно через день после устранения ошибки ещё раз проверить статус последней попытки экспорта, чтобы убедиться, что проблема действительно была решена.
Список ошибок экспорта
В Search Console отображаются следующие ошибки экспорта:
Проекта Google Cloud не существует
Вы неверно указали название проекта? Вы можете скопировать его со страницы настроек IAM или из URL проекта.
Неверно указано местоположение набора данных
Запрашиваемое местоположение набора данных для экспорта не может быть использовано, так как набор данных с таким именем уже существует в другом местоположении в этом проекте. Эта ошибка может возникнуть только на этапе настройки экспорта.
Для выбранного набора данных уже заданы другие настройки массового экспорта данных
Два ресурса не могут записывать данные в один и тот же набор. Выберите другой целевой набор данных или отдельный проект для массового экспорта данных из каждого вашего ресурса в Search Console.
В настройках проекта Google Cloud не указаны разрешения
Вам необходимо разрешить доступ Search Console к вашему проекту Google Cloud.
Для проекта Google Cloud не настроен BigQuery API
Вам необходимо включить BigQuery в вашем проекте Google Cloud.
- На боковой панели вашего проекта выберите API и сервисы > Включенные API и сервисы.
- Нажмите ВКЛЮЧИТЬ API И СЕРВИСЫ, а затем активируйте BigQuery API и BigQuery Storage API.
В настройках проекта Google Cloud не указаны платежные данные
В проекте Google Cloud должны быть указаны действительные платежные данные, иначе запись не будет произведена (даже если вы предоставите необходимые разрешения).
Ознакомьтесь с документацией BigQuery о проблемах с оплатой.
Превышена квота для проекта Google Cloud
Для вашего целевого проекта Google Cloud превышена квота.
Срок превышен
Операция экспорта заняла слишком много времени. Это может быть связано с ошибкой в работе Search Console.
Экспорт прерван
Число попыток экспорта данных за указанную дату достигло максимума. Search Console больше не будет пытаться экспортировать данные за этот день.
Неизвестная ошибка
Не удалось экспортировать данные по неизвестной причине. Дождитесь следующего планового экспорта данных, чтобы убедиться, что проблема разрешена.
Правила вашей организации запрещают выполнять экспорт в указанное местоположение
Ограничение на уровне организации в вашем проекте Google Cloud запрещает сохранять ваши данные BigQuery в выбранное местоположение. Выберите другое местоположение или обратитесь к администратору сайта вашего проекта, чтобы узнать о возможности снятия ограничения.
Несоответствие в наборе атрибутов
После создания таблиц можно установить срок хранения для разделов. При этом не следует изменять схему (например, добавлять столбцы), так как возникнут ошибки экспорта. Если новый столбец был добавлен по ошибке, проблему можно устранить, удалив его. В противном случае вам потребуется удалить таблицу, а это может привести к потере данных.
Недействительный идентификатор набора данных
Выбран набор данных с недействительным названием. Необходимо задать название с учетом документации BigQuery по именованию наборов данных.
Правила в отношении ограничений для доменов в Google Cloud
Политики организации, принятые в Google Cloud, ограничивают возможности предоставления доступа к ресурсам, исходя из особенностей ресурса домена или организации. Если вы хотите настроить нужный экспорт, вам необходимо принудительно предоставить доступ к аккаунту в процессе настройки.