如何获得Google bot索引的数以千万计的页面？
我们目前正在开发一个网站，该网站目前拥有800万个唯一页面，该页面将立即增长到约2000万个，最终增长到约5000万个或更多。 在您批评之前... 是的，它提供了独特而有用的内容。我们不断处理来自公共记录的原始数据，并且通过进行一些数据清理，实体汇总和关系映射，我们能够生成高质量的内容，开发出一个非常有用且独特的网站，部分原因是数据。 它的PR是0（新域，没有链接），并且我们每天以大约500页的速度在爬行，到目前为止，我们的索引页数约为30,000。以这种速度，索引我们的所有数据将花费400多年。 我有两个问题： 索引的比率是否与PR直接相关，我的意思是它是否足够相关，以至于通过购买具有良好PR的旧域将使我们达到可行的索引比率（每天约100,000页）。 是否有任何SEO顾问专门研究索引过程本身。否则，我们在SEO方面的表现尤其出色，尤其是在页面上，此外，“长尾”关键字词组的竞争非常低，因此我们的成功主要取决于被索引的页面数。 我们的主要竞争对手在短短一年的时间内就完成了约20毫米的索引页面，并获得了Alexa 2000的排名。 我们拥有值得注意的品质： 页面下载速度还不错（250-500毫秒） 没有错误（抓取时没有404或500错误） 我们使用Google网站管理员工具并每天登录 友善的网址 恐怕要提交站点地图。一些SEO社区发布的帖子暗示一个新网站的页面数百万，没有PR可疑。Google上有一个Matt Matts的Google录像带，该录像带也介绍了大型网站的分期启动过程，以避免进行更多的审查（在录像带中大约为2:30）。 可点击的站点链接可交付所有页面，深度不超过四页，并且通常一个页面上的内部链接不超过250（-ish）。 内部链接的锚文本是合乎逻辑的，并且会在详细信息页面上按层次结构向数据添加相关性。 以前，我们已将网站管理员工具上的抓取速度设置为最高（最大每两秒钟仅一页）。我最近将其改回了“建议Google决定”的建议。