知道,有几种方法可以在线调查您的竞争情况。排名,本地排名,引文,社交提及,当然还有反向链接。这个问题与上述任何问题都不相关,但在某种程度上是相关的,因为它的最终目标与您稍后会看到的目标相同。
所以希望我的问题和后续的回答可能对其他网站站长有所帮助遇到同样的问题。我将以一个场景来说明问题,希望该场景可以使您对我的信念和所要提出的想法有所了解。
场景
您的网站已经在相当竞争的利基市场中排名近两年。然后,您无处不在,排名下降,一个从未出现在第10页,不在乎排名10的网站突然登上了榜首。
立即反应可能是犯规并且您调查了它们的内容和反向链接,却发现它们的内容非常稀薄并且反向链接为零。因此,这里的可能性是尚未使用您用来检查这些站点的任何工具为该站点的反向链接建立索引。或者,无论出于何种原因,Google都会出错,错误会自行解决。
4个月以上,且同一瘦站点上的反向链接为0(仅来自预期的bot / scrapers-webstats等)排名。
因此,该网站似乎仍然存在,您开始思考导致您的网站排名排名较高的其他原因。
一个可能的原因可能是您自己的排名以及许多其他网站的排名都下降了,但是让所有这些网站的排名都降低是不现实的,因此前进的唯一方法是相信他们通过在Google中的声誉或犯规行为赢得了排名。这里的结论是-或至少是我的-有关站点最近已从一个域迁移到另一个域。他们可能只是简单地将301从一个域重定向到另一个域,或者他们可能已经在Google网站站长工具内告诉Google他们已移走了网站。方案结束。
问题
我的问题很简单,我对较长的文本段落表示歉意,但我想对这里要实现的目标有个好主意。输入足够的字符,这就是问题!
是否可以通过301重定向或使用Google网站站长工具来查找某个域是否已从一个域移至另一个域?
#1 楼
在某些情况下但并非始终都可以知道301重定向URL。几个在线工具(例如Ahrefs或MajesticSEO)可以为您显示此类信息。您只需要查看分类为“重定向”状态的反向链接。
Ahrefs的示例:
但是,您需要了解优秀的SEO专家不希望人们找到301重定向,因为在大多数情况下,过去从很好的SEO位置(例如,具有高PageRank的网站)收到的重定向URL非常好。
这就是为什么通常,为了隐藏这些良好的SEO位置(因此可能是每个人都有很好的机会获得非常好的反向链接),您无法使用在线工具找到重定向的URL。的确,该专业人士已将重定向路径阻止了除Google以外的所有机器人(特别是来自Ahrefs,MajesticSEO ...的那些机器人)。
因此,301重定向对SEO而言功能强大,对人们而言则是隐藏的。 />
PS:专业人士还可以使用伪装来隐藏指向访问者重定向URL的反向链接。因此,这些SEO的好地方就更好了。
评论
+1如我所见,这是一种半工作方法。取决于是否检测到重定向。问题是ahrefs和雄伟不使用Google索引吗?去探索?重定向域不会被索引,并且我假设显示的是针对具有internal.com/?redirect=go:domain或类似名称的网站。
–西蒙·海特(Simon Hayter)♦
2013年9月14日在12:42
确实,这是一种半工作方法,但我相信这是我们可以找到的最佳方法。
– Zistoloen
2013年9月14日14:01在
可耻的Google不会进行数月至数年的缓存; \
–西蒙·海特(Simon Hayter)♦
2013年9月14日14:09在
是的,Google并不完美...
– Zistoloen
2013年9月14日14:23在
我不知道ahref,但我可以肯定majesticSEO拥有自己的搜寻器,并且不依赖Google进行索引。
– Joshak
13-10-23在16:44
#2 楼
有几个网站可以告诉您有关网站的各种信息,例如:该网站的页数
该网站的流量估算值
其他网站托管在相同的IP地址(几乎是您想要的)
其他注册到同一所有者的站点(同样,几乎是您想要的)
我找不到一个可以告诉您其他域名的网站名称重定向到站点。对于这些站点之一而言,添加这种类型的功能可能不会花费很多。
如果我尝试构建一个工具来回答这个问题,请按以下步骤操作:
下载具有DNS的整个域名列表条目。这本身就是一个项目。您必须向每个注册中心申请访问权限,或向完成此任务的经纪人付款。关于stackoverflow的问题对两种方法都有答案
从1.5亿个域名中的每个域名下载页面,以查看其是否重定向到其他站点。我认为您应该能够每秒执行大约50次,并且抓取将花费一个多月的时间。该任务是可分割的,因此可以通过在其上运行多台计算机来加速。该爬虫的带宽和托管成本最终可能会相当可观,假设平均每个站点下载50KB,则每秒50个站点的带宽可能约为20mb / s。
评论
很好尝试斯蒂芬,但你没有真正给出答案。
– Zistoloen
2013年9月12日16:02
我希望会有更好的结果,但是经过一些研究,我对此表示怀疑。
–斯蒂芬·奥斯特米勒(Stephen Ostermiller)
2013年9月12日16:06
为DNS查询+1,通过我已经完成的工作,我检查了还有谁在使用相同的名称服务器以及IP。通过我怀疑名称服务器不相同,并且IP完全不同。
–西蒙·海特(Simon Hayter)♦
2013年9月12日17:07
#3 楼
我怀疑使用跨域规范标签会更有效。使用规范标记将使未索引站点保持活动状态,因此您可以继续构建传递到货币站点的链接(很难发送已请求301的页面的链接请求)。我不知道有什么自动/现成的方法可以检测到301。而且我不相信有什么方法可以确保您找到了所有这些。一些可能有助于您找到一些选项的选项是:
DNS查找,以查看您是否可以找到同一所有者的其他域。如果找到一个,这将为您提供一个良好的起点。有一些网站用于尝试查找网站网络(我相信是
spyonweb.com
之一),它们使用AdSense ID,会员ID,DNS信息等。在这种情况下,我认为所有者不会留下任何这些足迹,但是您永远不会知道。应该能够对开源Web爬网程序进行调整,使其仅跟踪指向301的链接并返回所需域名的结果。
寻找链接卖方在你的利基。这样做可能是为了在金钱网站和可能的不良链接之间创建一个缓冲区(关闭单个重定向的网站要容易得多,如果受到惩罚,则可以让数百名网站管理员删除指向您网站的链接)。可能意味着他们正在参与链接购买,在卖家网站上使用Xenu之类的商品会出现301链接。
inanchor:
在Google上进行搜索。如果有一个比较合适的识别品牌,则可能会打开一些在锚文本中使用该品牌的链接,但会转到其他域(然后希望将其重定向到您想要的域)。如果您恰巧使用这些方法找到1或2个网站,则可能会找到可用于查找更多网站的模式。
但是,如果所有这些都使用规范标签而不是301,那么这些都是没有意义的。我敢肯定您可以进行其他一些创造性的搜索,但这应该为您提供一个良好的开端。
-很好运气
评论
在MajesticSEO中浏览一些报告,似乎他们的站点资源管理器工具已在其“反向链接”部分中拆分了重定向。可以给你你所需要的。
– Joshak
2013年9月25日下午13:57
评论
我本以为跟踪反向链接的相同工具也可能会跟踪此信息。但是,我怀疑这些工具(很多)是否实际上遵循链接,因此看不到重定向(尽管这也意味着它们的反向报告并不完全准确)。+1。好问题。我以为,当您从网站站长工具中移动网站时,可以说Google会自动调整来自link:example.com的结果,以“移动链接集”。坦率地说,这种情况很奇怪。
我有个主意,您可以共享没有反向链接的URL吗?
@Zistoloen,那么它将有一个反向链接,呵呵
@Octopus:nofollow反向链接。