防止XML网站地图显示在Google搜索结果中

如何防止XML网站地图文件显示在Google搜索结果中，例如site:搜索查询的结果：

我不明白为什么Google首先会选择在搜索结果中显示站点地图文件。这些文件不供人类使用。

Google需要能够对其进行爬网以进行处理，因此我不能在robots.txt中禁止它。我只是不希望他们在处理之后将其放入搜索结果中。

Google会为XML网站地图建立索引（就像其他XML文件一样）。如果Google知道一个URL并返回有效的响应，则它将通过Google的包含规则并可能被索引。就个人而言，我仅通过GWT提交站点地图，并Sitemap:在robots.txt中包含引用，这肯定足以将其编入索引。

推荐的防止Google索引这些文件的方法是X-Robots-Tag在提供XML网站地图时包括HTTP响应标头。例如：

X-Robots-Tag: noindex

就像在HTML文件中包含机械手META标签一样，X-Robots-Tag标头可用于任何类型的文件。

参考：该文档（从2008年11月开始！）似乎引用了我们自己的John Mueller（Google）关于X-Robots-Tag处理XML网站地图时使用响应的问题。
是的，Google会为您的XML Sitemap文件编制索引并对其进行排名

有关更多信息，请参阅Google开发人员指南：
机器人元标记和X-Robots-Tag HTTP标头规范

MrWhite关于使用X-Robots-Tag的答案似乎是正确的方法。

这是可以在.htaccess或Apache配置文件中使用的代码。（参考：WebmasterWorld-Sitemaps显示在SERP中-如何防止这种情况？）

<Files ~ "sitemap.*\.xml(\.gz)?$">
  Header append X-Robots-Tag "noindex"
</Files>

在nginx下，配置如下。（参考：Yoast X-Robots-Tag示例）

location ~* sitemap.*\.xml(\.gz)?$ {
    add_header X-Robots-Tag "noindex";
}

为什么这有关系？

如果您实际上可以在SERP中找到您的站点地图，那么您会遇到更大的问题。

我将更多地专注于用有用​​的内容来创建页面。这样一来，即使找到站点地图也将非常困难。无论如何，那并不是说您会在乎。

聚苯乙烯

几乎每个人都将站点地图保存在同一位置。因此，如果有人想找到您保存的位置，他们会:)

将以下内容放入robots.txt

User-agent: *
Disallow: /sitemap.xml

而是通过Google网站站长工具提交您的站点地图。