了解您的在线竞赛如何揭示301的指导域名

我坚信，进入任何细分市场的网站站长都应事先调查其在线竞争情况，以了解他们面临的挑战，并确定他们的目标是否现实且在时间和金钱上都可以承受。

您可能知道，有几种在线调查竞争对手的方法。排名，本地排名，引文，社交提及，当然还有反向链接。这个问题与以上任何问题都不相关，但在某种程度上相关，因为它具有与您稍后将看到的相同的最终目标。

因此，希望我的问题和后续的回答可能会帮助其他网站管理员遇到相同的问题。我将以一个场景的方式来说明问题，希望该场景可以使您对我的信念和所要提出的想法有所了解。

场景

在相当竞争的利基市场中，您的网站已连续近两年排名第一。然后，您无处不在，排名下降，而从未出现在第10页，不在乎排名10的网站突然居于首位。

立即的反应可能是犯规，您调查了它们的内容和反向链接，却发现它们的内容非常稀薄并且反向链接为零。因此，这里的可能性是尚未使用您用来检查这些站点的任何工具为该站点的反向链接建立索引。或者，Google出于任何原因犯了错误，将自行解决。

在4个月内以及具有0个反向链接的同一精简网站上（仅来自预期的bot / scrapers中的网站-webstats等），仍排名最高。

因此，该网站似乎将继续存在，您开始思考导致网站排名排名较高的其他原因。

一个可能的原因可能是您自己的排名以及许多其他网站的排名都下降了，但是让所有这些网站的排名下降都是不现实的，因此前进的唯一方法是相信他们已经通过在Google中的声誉或犯规而赢得了排名。这里的结论是-或至少是我的-有关站点最近已从一个域迁移到另一个域。他们可能只是简单地将301重定向从一个域重定向到另一个域，或者他们可能已经在Google网站站长工具中告知Google他们已移动网站。场景结束。

问题

我的问题很简单，我对长篇文章表示歉意，但我想对这里要实现的目标有个好主意。输入足够的字符，这就是问题！

是否可以通过301重定向或使用Google网站站长工具来确定某个域是否已从一个域移至另一个域？

在某些情况下（并非始终），可以知道301重定向URL。

多个在线工具（例如Ahrefs或MajesticSEO）可以为您显示此类信息。您只需要查看归类为“重定向”状态的反向链接。

Ahrefs示例：

但是，您需要了解一位优秀的SEO专家，不要让人们找到301重定向，因为在大多数情况下，过去从很好的SEO位置（例如，具有高PageRank的网站）收到的重定向URL都是非常好的反向链接。
这就是为什么总的来说，为了隐藏这些良好的SEO位置（并因此可能是每个人都有很好的反向链接的好机会），您无法使用在线工具找到重定向的URL。确实，除了Google以外，专业人员已经禁止所有机器人（尤其是来自Ahrefs，MajesticSEO ...的机器人）的重定向URL。
因此，301重定向对于SEO而言功能强大，对人们而言则是隐藏的。

PS：伪装也可以由专业人员应用，以隐藏指向访客的重定向URL的反向链接。因此，这些SEO的好地方被更好地隐藏了。

有几个站点可以告诉您有关站点的各种信息，例如：

• 网站上的页面数
• 该网站的流量估算
• 其他站点托管在相同的IP地址（几乎是您想要的）
• 向同一所有者注册的其他网站（同样，几乎是您想要的）

我找不到一个可以告诉您其他域名重定向到站点的域名。对于这些站点之一而言，添加此类功能可能不会花费很多。

如果我尝试构建一个工具来回答这个问题，请执行以下操作：

• 下载具有DNS条目的域名的完整列表。这本身就是一个项目。您必须向每个注册中心申请访问权限，或向完成此任务的经纪人付款。 关于stackoverflow的问题对两种方法都有答案
• 从1.5亿个域名中的每个域名下载一个页面，以查看它是否重定向到其他站点。我认为您应该能够每秒执行约50次操作，并且抓取将花费一个多月的时间。该任务是可分割的，因此可以通过在其上运行多台计算机来加速。该爬虫的带宽和托管成本最终可能相当可观，假设平均50个站点前下载，则每秒50个站点的带宽可能约为20mb / s。

我怀疑使用跨域规范标签会更有效。使用规范标记将使未索引站点保持活动状态，因此您可以继续构建传递到金钱站点的链接（很难发送已请求301的页面的链接请求）。

我没有发现自动/现成的方法来检测301。而且我不相信有任何方法可以确保您找到了所有这些。一些可以帮助您找到一些选择的选项是：

DNS查找以查看您是否可以找到同一所有者的其他域。如果找到一个，这将为您提供一个良好的起点。有一些网站用于尝试查找网站网络（spyonweb.com我相信是一个），它们使用AdSense ID，会员ID，DNS信息等。在这种情况下，我认为所有者不会留下任何此类足迹，但是您不知道

应当对开源Web搜寻器进行调整，使其仅遵循指向301的链接并返回所需域名的结果。

在您的利基市场中寻找链接销售商。这样做可能是为了在金钱网站和可能的不良链接之间创建一个缓冲区（关闭单个重定向的网站要容易得多，如果受到惩罚，则可以让几百个网站管理员删除指向您网站的链接）。可能意味着他们正在参与链接购买，在卖家网站上使用Xenu之类的商品会出现301个链接。

inanchor:在Google上搜索。如果有一个适合您的标识品牌，则可能会在锚文本中打开一些使用该品牌的链接，但会转到其他域（然后希望将其重定向到您想要的域）。

如果您碰巧使用这些方法找到1或2个网站，则可能会找到可用于查找更多网站的模式。

但是，如果所有这些都使用规范标签而不是301，那么这些都是没有意义的。我敢肯定您可以进行其他一些创造性的搜索，但这应该为您提供一个良好的开端。

-祝好运