Googlebot从哪里抓取？

Question

我一直在寻找Googlebot及其兄弟姐妹从“CA”以外的地方爬行的位置的高低，并且没有找到特定于爬行的位置的运气。我找到了2008年的数据慢跑地图（http://bit.ly/mONhf9），我发现谷歌在他们的数据中心拥有自称的光彩，并附有可爱的照片（http://www.google.com/about/datacenters/）。

至少3年前我从经验中知道，'bot'也会来自VA ......但过去那......没什么。

任何人都可以帮忙解决这个问题吗？我正在收集谷歌不希望我知道。

Answer 1

您的里程会有所不同，但在我可以访问的最受欢迎的网站的情况下，抓取来自：

• 伊利诺伊州（46.35％）
• 亚利桑那州（15.68％）
• 威斯康星州（14.95％）
• 弗吉尼亚州（11.85％）
• 加州（11.17％）

受这些抓取影响的网络服务器位于弗吉尼亚州的亚马逊上。

这是在地图上：http://www.chrisbrunner.com/2014/04/01/where-does-googlebot-crawl-from/ （我无法直接发布，因为这是我的第一篇文章。）

同样，其他人会有不同的经历，但这是我们在2014年3月所观察到的。

Answer 2

我收集了有关该主题的信息，并且我得出结论，GoogleBot从6个不同的位置抓取。我无法将它们精确地放在地图上，但似乎其中4个位于美国的不同地区，其中一个位于欧洲。

您已收到此帖中的所有详细信息：http://blog.domenech.org/2013/09/where-is-googlebot-crawler-located.html