Acerca do Motor de rastreio do AdSense

Um motor de rastreio, também conhecido como spider ou bot, é o software que a Google utiliza para processar e indexar o conteúdo de páginas Web. O motor de rastreio do AdSense, denominado Mediapartners-Google, visita o site para determinar o conteúdo e poder fornecer anúncios relevantes.

Seguem-se alguns factos importantes sobre o Motor de rastreio do AdSense de que deve ter conhecimento:

• O relatório do motor de rastreio é atualizado semanalmente.

  O rastreio é feito automaticamente e não podemos aceitar pedidos para rastrear com mais frequência.

• O Motor de rastreio do AdSense é diferente do motor de rastreio do Google.

  Os dois motores de rastreio são independentes, mas ambos partilham uma cache. Esta é uma forma de evitar que ambos os motores de rastreio peçam as mesmas páginas e, consequentemente, ajuda os publicadores a manter a largura de banda. O motor de rastreio da Search Console também é independente.

  Nota: o AdSense também usa um motor de rastreio denominado Google-Display-Ads-Bot para validar o seu site quando adiciona um site ao AdSense.
• Resolver problemas de rastreio do AdSense não resolve problemas de rastreio do Google.

  Resolver os problemas apresentados na página Acesso ao motor de rastreio não terá qualquer impacto no posicionamento nos resultados da pesquisa do Google. Para mais informações acerca da classificação do seu site no Google, consulte o nosso artigo sobre como ser incluído nos resultados da pesquisa do Google.

• O motor de rastreio indexa por URL.

  O nosso motor de rastreio acederá ao site.com e ao www.site.com em separado. No entanto, o nosso motor de rastreio não contará site.com e site.com/#anchor em separado.

• O motor de rastreio não terá acesso às páginas ou diretórios proibidos por um ficheiro robots.txt.

  Os motores de rastreio do Google, Mediapartners-Google e Google-Display-Ads-Bot do AdSense seguem as regras do ficheiro robots.txt. Se o ficheiro robots.txt proibir o acesso a determinadas páginas ou diretórios, estes não serão rastreados.

  Nota: tenha em atenção que, se estiver a publicar anúncios em páginas em que o acesso de robôs está a ser interditado com a linha User-agent: *, o Motor de rastreio do AdSense continuará a rastrear essas páginas. Para impedir que o motor de rastreio do AdSense aceda às suas páginas, tem de incluir o seguinte no ficheiro robots.txt:

  User-agent: Mediapartners-Google

  User-agent: Google-Display-Ads-Bot

• O motor de rastreio apenas tenta aceder aos URLs em que estão implementadas as nossas etiquetas de anúncios.

  Só as páginas que apresentam anúncios Google deverão enviar pedidos para os nossos sistemas e ser rastreadas.

• O motor de rastreio tenta aceder às páginas que fazem o redirecionamento.

  Quando tem "páginas originais" que redirecionam para outras páginas, o nosso motor de rastreio tem de aceder às páginas originais para determinar se estas fazem um redirecionamento. Assim, a visita do motor de rastreio às páginas originais aparece nos registos de acesso.

• Não é possível controlar a frequência com que o motor de rastreio indexa o conteúdo do seu site.

  Neste momento, não temos controlo sobre novos rastreios de sites. O rastreio é efetuado de forma automática pelos nossos bots. Se efetuar alterações a uma página, poderá demorar até uma ou duas semanas para que as alterações sejam refletidas no nosso índice.