Answers:
站点地图文件的限制为50,000个URL,每个站点地图10 MB。可以使用gzip压缩站点地图,从而减少带宽消耗。支持多个站点地图文件,其中站点地图索引文件用作总共1000个站点地图的入口。
请注意,您可以在robots.txt文件中指定多个站点地图:
如果您遇到限制,则可能以某种方式划分用户。假设您每个用户的每个网址都没有超过10,000个网址,您可以将其分解为文件并将其添加到robots.txt
文件中:
Sitemap: http://www.example.com/sitemaps/users-001-005.xml
Sitemap: http://www.example.com/sitemaps/users-006-010.xml
Sitemap: http://www.example.com/sitemaps/users-011-015.xml
Sitemap: http://www.example.com/sitemaps/users-016-020.xml
Sitemap: http://www.example.com/sitemaps/users-021-025.xml
Sitemap: http://www.example.com/sitemaps/users-026-030.xml
Sitemap: http://www.example.com/sitemaps/users-031-035.xml
Sitemap: http://www.example.com/sitemaps/users-036-040.xml
Sitemap: http://www.example.com/sitemaps/users-041-045.xml
Sitemap: http://www.example.com/sitemaps/users-046-050.xml
现在,您仍然必须注意每个站点地图的10MB限制,但这是一种解决“太多”网址问题的方法。