如何让某些页面不被搜索引擎索引?

时间:2011-01-30 15:34:26

标签: indexing meta-tags robot

我做了:

<meta name="robots" content="none"/>

这是最好的解决方法,还是有更好的方法?

2 个答案:

答案 0 :(得分:1)

您可以在网站的根目录中创建名为robots.txt的文件。格式如下:

User-agent: (user agent string to match)
Disallow: (URL here)
Disallow: (other URL here)
...

示例:

User-agent: *
Disallow: /

让(好的)机器人不会在您的网站上为任何内容编制索引。当然,有些机器人会完全忽略robots.txt,但对于那些尊重它的机器人来说,这是你最好的选择。

如果您想了解有关robots.txt文件的更多信息,请参阅http://www.robotstxt.org/

答案 1 :(得分:0)

您可以使用robots.txt文件来引导搜索引擎哪些页面不进行索引。

http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156449

或者在每个页面中使用meta noindex标记。