可以注册域名，但是没有出现在搜索引擎上吗？

我需要创建一个个人网站，但我不希望它出现在Google或其他搜索引擎中。我只希望特定的人可以使用它。

例如：如果我购买www.example.com，我希望这些网页仅对那些在其浏览器的URL栏中输入该地址的用户可用。不在搜索引擎中。那可能吗？

编辑：我知道关于robots.txt。但这是针对页面的，而不是我要寻找的内容。我正在寻找整个域名，只有知道它的人才能使用。

否。注册域名时，这是公共知识。保守秘密是不可能的。当它出现在搜索引擎看到的任何内容中时，[facebook帖子，twitter消息，任何内容]都将被“编入索引”。所有你能做的，通过robots.txt，是问搜索网站无法抓取您的网站，但得到了他们的名字，仍然会有索引。（据记录，许多抓取工具会忽略您中的所有内容robots.txt）

严格正确的答案是“否”，但是，您可以通过其中的一种方式（除了不鼓励使用robots.txt的机器人）来使网络服务器查找REFERER字符串，并且将“ Referer”作为搜索引擎（或未经授权的网站）。

这样做取决于您的服务器-如果您使用的是Apache，则应该能够使用mod_rewrite来匹配REFERER变量（拼写正确-这是标准错误）。虽然没有什么可以阻止某人颠覆这一点，但是它应该可以捕获很多自动化站点。

另一个解决方案可能是限制朋友访问服务器-例如，通过限制他们的IP地址（或使用VPN），甚至确保他们使用特定的，晦涩的浏览器并进行检查。

不过，考虑一下，最好的方法可能就是使用.htaccess密码保护整个站点，并为您的朋友提供登录凭据！