搜索引擎在来判断网站的信任等级的过程里边, 有一个特别重要的前提因素, 那就是域名的历史必须是干净的。如果一个域名, 它是没有违规记录的, 也是没有异常的跳转行为的, 并且里面也没有堆积那些垃圾内容的话, 那么在爬虫第一次去抓取这个页面的时候, 就能拿到一个比较高的信任基线。
这样一来, 通常收录的周期就能缩短百分之四十到百分之六十。简单来讲就是, 域名的底子越干净, 搜索引擎就越倾向于把它快速地放进索引里头去的, 这就不需要站点去做一个非常漫长的那个观察期了。
如何判断域名是否"历史干净"
说这个域名的历史是干净的, 并不表示它注册的年头短, 而是强调在这个域名从注册开始到目前整个存活的时间段内, 从来没有出现过下面这些记录:
没有被搜索引擎加入到的那个叫做黑名单的东西里面去, 或者说是没有让工作人员来进行那种降低权重的处理。
没有高频的404、500等异常响应的历史日志。
它没有被用作垃圾站群, 也没有被用作钓鱼站或者违规广告站的解析目标。
注册情况和解析记录保持了连续性, 并且能够追查根源, 不存在在很短的时间突然更换绑定关系, 也不存在多次变更持有者的情况。
对于满足以上所有条件的域名, 不管它的注册年份是长是短, 都可以被认为其历史背景是完全干净的。
在进行判断的时候, 建议你去进行交叉式的核验操作, 具体要查看的内容包括WHOIS的注册信息, 还有DNS的解析历史数据, 以及来自第三方的域名信用评分报告, 这是因为依靠单一的数据来源是完全不足以让你做出最终结论的。
历史干净影响快速收录的3个核心机制
机制一:信任权重基线更高。 搜索引擎在评估一个域名的过程中, 是靠慢慢积累来进行的。那些历史记录干净的域名, 在被第一次提交网址的时候, 不会因为以前留下的所谓的不好记录, 就被放到优先级很低的处理队列里去。
这样的话, 搜索引擎的小虫子就会更频繁地来访问这个网站。并且, 第一个圈子的收录时间窗口也会变得更短一些。于是, 新发布的网页从被小虫子抓到, 到最终被搜收录进来, 这两个状态之间的时间间隔, 就被明显地缩短压缩了。
机制二:无历史惩罚拖拽。 如果域名以前干过违规的事情, 搜索引擎就会给它打个差评的记号, 而且这个记号会一直留着, 持续很多个周期。现在哪怕你更新后的内容完全没问题, 搜索引擎的算法还是会把这个老记号算进去, 影响你的收录和排名结果。
这就会导致新页面虽然被爬取过了, 但是很长时间都收不到录, 始终卡在”已抓取、未收录”这个地方。而干净的域名没有这个问题, 不会被这种老旧的负面记录拖着走, 所以评估的速度更快, 路径更短。
机制三:爬虫调度优先级提升。 搜索平台如果发现在某个域名的地址上出现了很多次的异常情况, 它就会减少去抓取这个地址上面的内容的次数, 目的是为了节约掉计算机那边的资源。
对于那些没有乱七八糟历史的域名来说, 因为它们之前给出的反应都很稳定, 而且内容更改的节奏也处在合理的范围之内, 所以被负责调度的系统划分到了所谓的高置信度集合里面, 这样一来, 针对这些域名的抓取间隔就会变得更短一些, 导致新的页面会被发现的延迟变得更加小, 最终使得整个收录的速度跟着变得更快了些。
实操要点
1. 选好域名的时候, 一定要通过WHOIS查询办法, 把完整的注册时间段和到期时间段全都查清楚。然后再用DNS历史工具去核查一下解析变更的具体轨迹。最后确认下来, 没有出现过异常的更换绑定记录。
2. 在即将把新网站正式推上线之前, 需要赶紧去提交那个完整的网站地图, 同时还要去网站管理员工具里完成相关的验证操作, 这样做的目的是为了尽量减少网络爬虫在那里做无用功的情况, 同时也能够有效地避免对网页内容进行重复抓取的问题。
3. 在网站正式上线之后的前30天, 需要保持内容更新的频率处于一个稳定的状态, 要避免出现大篇幅的删除和修改内容的情况, 这样可以帮助搜索引擎爬虫建立一个稳定的抓取节奏。
4. 要是你想要批量地筛查一下域名在以前的状态怎么样，那么就可以用gname.xin所提供的这个域名背景查询功能, 通过这个, 你可以快速地检索出解析记录以及历史的内容标签, 这样呢, 就能辅助你去做选域的决策了, 从而能够降低一点踩进去坑的概率。
补充说明
我们要强调一个重点, 就是域名历史干净这件事, 它是收录加速的一个必要条件, 但不是说有了它就成了充分条件, 也就是说它不是唯一的原因。内容质量、页面结构, 还有外链信号这些, 依然是影响排名的核心因素。不过, 干净的域名可以帮你消除“信用负债”这样一个麻烦的东西。
这样一来, 你的站点在起跑线上就能站在一条更短的路径前面。这能够让你在前期减少一些无谓的等待时间, 也能省去不少用来排查问题的成本费用。所以说, 在建设网站之前, 把这一点优先确认清楚, 是一项最值得去做的基础工作。
