Googlebot 从哪里抓取?

Jas*_*son 3 gis googlebot

我一直在寻找 Googlebot 及其兄弟姐妹从“CA”以外的位置抓取的位置,但没有找到专门用于抓取的位置。我找到了 2008 年的数据慢跑地图 ( http://bit.ly/mONhf9 ),我发现 Google 在其数据中心中自称才华横溢,并配有可爱的照片 ( http://www.google.com/关于/数据中心/)。

根据至少三年前的经验,我确实知道旧机器人也将来自 VA……但除此之外……什么也没有。

谁能帮忙解这个谜语吗?我猜谷歌不想让我知道。

小智 5

您的里程会有所不同,但就我可以访问的最受欢迎的网站而言,抓取来自:

  • 伊利诺伊州 (46.35%)
  • 亚利桑那州 (15.68%)
  • 威斯康星州 (14.95%)
  • 弗吉尼亚州 (11.85%)
  • 加利福尼亚州 (11.17%)

遭受这些抓取的网络服务器位于弗吉尼亚州的亚马逊。

它在地图上:http://www.chrisbrunner.com/2014/04/01/where-does-googlebot-crawl-from/ (我无法直接发布它,因为这是我的第一篇文章。 )

同样,其他人也会有不同的经历,但这就是我们在 2014 年 3 月期间观察到的情况。

  • 我正在使用 MaxMind GeoIP 免费数据库,该数据库很好,但不能总是从其 IP 地址解析 Googlebot 的位置。PageSpeed Insights 记录了我的服务器的响应时间为 600 毫秒,这是一台位于伦敦互联网骨干网附近的快速网络上的快速 SSD 支持的机器(我的服务器对我的响应要快得多)。根据延迟情况,Pagespeed Insights googlebot 访问可能位于美国。如果是这样,这是否意味着非地理目标网站应该托管在美国才能获得良好的排名?那么这对美国境外的互联网用户或托管公司公平吗? (2认同)