通知

在经过改进的“我的 AdMob 页面”上,您可以获取个性化的优化提示,了解您帐号的优化程序以及设置完成情况。

应用

内容抓取工具简介

抓取工具(也称为“蜘蛛”程序或漫游器)是 Google 用来处理网页内容并将其编入索引的软件。内容抓取工具通过访问您的网站确定网站内容,以便投放相关的广告。

以下是您应了解的关于内容抓取工具的一些要点:

  • 抓取工具报告每周更新一次。
    抓取过程是自动执行的,因此,我们无法应您的请求更频繁地执行抓取。
  • 内容抓取工具不同于 Google 抓取工具。
    这两种抓取工具相互独立,但是它们共用一个缓存。我们这样设计的目的是避免这两种抓取工具同时请求相同的网页,从而帮助发布商节省带宽。与此类似,Search Console 抓取工具也是独立的。
  • 解决内容抓取工具问题并不会同时解决 Google 抓取问题。
    解决“抓取工具访问权”页面上所列的问题不会影响您的网页在 Google 搜索结果中的排名。如需详细了解您的网站在 Google 上的排名,请参阅以下 AdSense 文章:在 Google 搜索结果中收录您的网站
  • 抓取工具按网址编制索引。
    我们的抓取工具会分别访问 site.com 和 www.site.com,但不会分开统计 site.com 和 site.com/#anchor 的信息。
  • 抓取工具不会访问 robots.txt 文件禁止访问的网页或目录。
    Google 和 AdMob Mediapartners 抓取工具都受 robots.txt 文件的约束。如果您的 robot.txt 文件禁止访问某些网页或目录,则抓取工具不会抓取这些内容。
    请注意,如果您在使用 User-agent: * 行阻止漫游器访问的网页上投放广告,内容抓取工具仍会抓取这些网页。要阻止内容抓取工具访问您的网页,您需要在自己的 robots.txt 文件中指定 User-agent: Mediapartners-Google了解详情
  • 抓取工具仅会尝试访问已植入我们的广告代码的网址。
    向我们的系统发出请求并被抓取的应该只是展示 Google 广告的网页。
  • 抓取工具会尝试访问重定向的网页。
    如果有重定向到其他网页的“原始网页”,我们的抓取工具就必须访问原始网页,以确定重定向确实存在。因此,您的访问日志会显示我们的抓取工具对原始网页的访问。
  • 重新抓取网站
    目前,我们无法控制抓取工具将您网站上的内容编入索引的频率。抓取操作是由我们的漫游器自动执行的。如果您对网页进行了更改,您所做的更改可能需要最多 1 到 2 周的时间才能反映到我们的索引中。

该内容对您有帮助吗?

您有什么改进建议?
true
Show your support to promote DEI in Gaming by turning intentions into action!

Check out the newly launched Diversity in Gaming website, where you can find video stories and written pledges from global gaming developers. This campaign centers on 3 pillars: diverse teams, diverse games and diverse audiences showing how diversity is not just good for gamers, but for business as well. Show your support by taking the pledge to promote DEI in Gaming and share it on social!

Learn More

搜索
清除搜索内容
关闭搜索框
Google 应用
主菜单