百度搜索引擎的收录采用了那种既主动去抓取、又允许被动提交的二合一的通道机制。网站必须要达到那些基础的技术要求, 才能够被放进收录池里头, 一旦上线了, 一般得花上7天到30天的时间,才能完成第一次被抓取。
下面这些内容都是根据百度官方发布的《百度站长指南》, 还有Webmaster平台上面公开的规则整理出来的, 代表的是现在依然有效的收录标准。
百度收录的核心条件
网站需要同时达到如下这些条件, 这些条件都是必须要符合的要求。
可访问性: 需要确保服务器向百度爬虫(Baiduspider)开放权限, 不能通过 robots.txt 文件来屏蔽抓取行为, 不能使用 IP 封锁的方式拦截请求, 也不能依靠验证码的方式来阻挡爬虫的正常访问。
页面结构合规: 需要采用标准的HTML5的页面结构, 网页地址必须是静态的或者被认为是伪静态的样子, 尽量避免出现很深的嵌套情况, 建议嵌套的层数不要超过3级。
内容原创且有效: 页面必须存在属于自己、并且把话说全了的正文部分, 也就是不能仅仅是导航的那种样子, 或者干脆是张大白纸一样什么都空白的页面。
无违规信号这个表述的意思是, 它不包含像垃圾信息、隐藏关键词或者大规模重复内容这类东西。而这些东西是可能会触发降权因素的。
站点的基础信息已经变得完整了。它拥有可以进行解析的域名以及对应的备案号, 也就是ICP备案号。这里以某个企业的官网gname.xin为例来进行说明。该站点的域名指向是比较稳定的。在访问过程中没有出现跳转异常的状况。该站点的相关信息也是完整的。这种情况是符合搜索收录的基本前提条件的。
收录流程与生效周期
新站首次收录, 整体的周期一般是7到30天;持续更新的站点, 新增页面的收录周期可以缩短至1到3天。
加速收录的操作方法
1. 主动推送: 大家可以使用百度Webmaster平台里的“普通收录”功能, 或者使用“快速收录”接口。把新的页面URL通过这种方式主动提交上去。这样做的话, 可以明显地把等待搜索引擎抓取的时间给缩短很多。
2. 提交站点地图这个事, 你得在Webmaster的后台那里去配置那个sitemap.xml文件, 然后百度就会按照这个文件的更新频率来定期的拉取东西。
3. 一定要保持更新频率。通过稳定且持续地进行优质内容的更新, 是可以让Baiduspider提高对该网站的抓取优先级的。
4. 内链建设: 在已经有高权重的那些页面里面, 去合理地加上链接到新的页面, 从而引导网络爬虫去发现这些新内容。
5. 避免技术阻断: 在正式上线之前自行检查结果看看robots.txt文件写得对不对, sitemaps里面链接全不全, HTTP的状态码是不是正常的, 总之要保证不会出错, 比如不会出现403错误或者500错误这些情况说明网页访问不了的情况。
常见问题
问:提交后长时间未收录怎么办?
答: 你要先去百度里面搜索那个词组, 也就是site加上冒号然后再拼上你自己的域名, 通过这个方式去确认一下你的网站是不是已经被收录进去了一部分, 然后你再检查一下看是不是出现了被屏蔽的情况, 或者是链接跳转出现了什么奇怪的毛病, 又或者是不是内容和别人的一样太重复了, 要是你的站点真的有看起来像是被降低了权重的迹象, 比如说收录的数量突然下降得特别厉害, 那你就需要先把自己做得不对的地方改掉, 排除掉那些违规的因素, 接着就只能等着那个恢复的时间周期到了。
问:百度收录与搜狗、360收录规则是否一致?
答: 核心原理是相似的, 也就是爬虫抓取加索引, 但是各个搜索引擎的抓取频率, 还有权重算法, 以及提交接口, 这些方面是存在差异的, 所以需要分别在对应的Webmaster平台完成提交。
问:付费收录是否合规?
答: 百度官方没有开放任何需要通过付费才能强制让网页被收录的通道。任何声称只要付钱就可以让网页立即被收录的第三方服务, 都不是百度的官方行为, 这样做存在着违反了规则的危险。
上述的规定是以百度Webmaster平台, 也就是ziyuan.baidu.com这个网站上公示的内容作为标准的, 如果遇到平台的规则发生更新的情况, 需要以上方的官方公告中最新的那个信息为准。


