谷歌机器人rel =“nofollow”停止跟踪多久

Question

我刚刚将rel =“nofollow”添加到某些链接中。

任何人都知道谷歌在“nofollow”添加到链接后停止关注需要多长时间？ 我在一小时前补充说，仍然看到他们爬上“nofollow”链接。

Answer 1

可能会出现这样的情况：它不会停止关注您的rel="nofollow"链接。 According to Wikipedia：

  谷歌表示他们的引擎字面上采用“nofollow”并且根本没有“跟随”链接。但是，由SEO进行的实验显示出相互矛盾的结果。这些研究表明，谷歌确实关注了该链接，但没有为链接页面编制索引，除非它已经出于其他原因（例如指向该页面的其他非nofollow链接）存在于Google索引中。

Answer 2

来自Google的Webmaster Central：

  

Google的蜘蛛经常爬行   web重建我们的索引。爬行是   基于诸如此类的诸多因素   PageRank，链接到页面，和   爬行约束如   URL中的参数数量。任何   多个因素可能会影响抓取   个别网站的频率。

     

我们的抓取过程是算法;   计算机程序决定哪个   要抓取的网站，频率和方式   从每个站点获取的许多页面。我们   不接受付款以抓取网站   更频繁。有关提示   保持爬虫友好   网站，请访问我们的webmaster guidelines。

使用Google Webmaster Tools，您可以看到它最后一次抓取您的网站，如果这些链接仍在搜索中显示，则根据@Bears帖子，这些链接可能会发生冲突。

Answer 3

这取决于很多事情。谷歌的数据库是大规模分发的，因此改变可能需要一段时间才能传播。此外，爬虫可能需要一些时间来重新访问您添加nofollows的页面 - 再次，这是由一些封闭的Google算法计算的。在最糟糕的情况下，我已经看过几十天没有索引更新;最好的情况，几分钟。这种方式将是几天。耐心，年轻的绝地;）

Answer 4

我正在跟踪关于谷歌如何访问它们的大约7000页。是的，即使我把nofollow的东西放了一段时间，它也会继续关注页面。在最终删除之前，它会抓取同一页面几次。所以这需要时间。