如何从搜索引擎隐藏网站

Question

我正在开发一个网站，我想主持客户的开发工作以便他批准，但我不希望搜索引擎找到该网站。

我该如何隐藏它？

我听说过添加robot.txt？

任何建议？

Answer 1

您可以在Wikipedia上找到它：

User-agent: *
Disallow: /

将它放在您的robot.txt文件中，该文件位于您的网络服务器的顶级目录中，如here所述。

Answer 2

如果您没有将公开链接放到网站上，搜索引擎将无法轻易找到它。但是，在某些时候，如果很多人讨论该网站，那么肯定会有一个链接。

Robots.txt将有助于所有合法搜索引擎，例如Google。但是，如果有人意外地找到了网址或者它被保留在浏览器历史记录中，那么它将无济于事。

最可靠的方法是在网站上输入密码： http://www.elated.com/articles/password-protecting-your-pages-with-htaccess/

Answer 3

是的，您可以使用robots.txt。查看本指南http://www.robotstxt.org/robotstxt.html。

从整个服务器中排除所有机器人。

User-agent: *
Disallow: /

Answer 4

当我需要隐藏开发中的文件夹或网站时，我使用robot.txt。 http://www.robotstxt.org/robotstxt.html 我认为它最适合您的需求。