域名收录的核心路径
很多人会把域名收录这个事儿, 理解成把自己网站上用的那个域名, 主动地提交到像百度、Google、Bing啊这些搜索引擎那里去, 然后, 就会有一个让搜索引擎里的网络蜘蛛或者说是爬虫, 把这个东西放进自己那边的索引库里面去的这样一个过程。
等到了收录这个步骤全部完成之后的时候, 用户要是去搜索一些相关的关键词的话, 那么在这个域名下面的那些页面, 才算是有了出现在最终的搜索结果里面的那种可能性。
至于说核心的一套操作路径是什么样子的, 它其实包含好几个环节, 首先是去配置好一个叫作robots.txt的文件, 这第一步做完再去提交一个名叫sitemap的东西, 再然后要去专门的那个搜索引擎的平台上面, 手动地把具体的URL地址给提交上去, 等到最后一步的时候, 就是静静地等待那个网络爬虫来抓取并进而把它放入索引里去。
提交前的必要条件
在域名提交收录这一操作之前, 所面对的前提条件, 必须得是全都满足了的, 这才行。
已经做好了关于ICP的备案工作, 这是针对在境内的服务器来说的, 或者是说, 如果使用的是在的服务器, 那么它需要是可以被正常地进行访问的这个状态是必须要满足的其中一种。
网站首页已经部署完成了, 核心页面也已经部署完成了, HTTP状态码返回结果是200。
robots.txt文件已正确配置，未屏蔽主要页面路径；
页面里面是拥有有效的标题标签以及元描述这两个东西的。
这个站点的结构是搞得很清楚的, 里面的内链也是足够丰富的, 爬虫去走的时候是可以做到正常遍历的。
具体操作步骤
1. 百度收录
你需要去百度搜索资源平台（ziyuan.baidu.com）这一个网址上, 然后使用你自己的站长账号把系统登录上去。
进到那个叫做"普通收录"的页面之后, 你得点击一下那个"添加URL"这个地方, 把你想要让系统收录的一些页面地址给批量粘贴到这个区域里, 但是记住, 一次操作里面最多只能放入5000条这样的记录。
如果你的网站具有一定的权重存在的话, 那么你就可以去选择使用那个叫作"快速收录"的功能选项, 这样一来就会加快系统对于内容的抓取速度了。等你把内容提交成功完成以后, 请去到"抓取诊断"这个板块内部去查看具体的处理状态是怎样的一个情况。
2. Google收录
先去登录Google Search Console, 对应的网址是search.google.com/search-console, 然后用DNS TXT记录或者是HTML文件这样的方式来完成域名的验证操作。
接着要进入到叫做Sitemaps的页面中去提交XML sitemap文件。对于那些属于重点的页面情况来说, 是可以选择去使用“请求编入索引”这个功能的, 以此来手动地触发搜索引擎来进行抓取工作。
3. Bing收录
去访问 bing.com/webmaster, 登录 Bing Webmaster Tools。完成域名验证这件事之后, 你可以在“Submit URLs”这里手动提交网址。或者呢, 你也可以通过 sitemap 通道的这种方式进行自动提交。
以实际的站点, 比如 gz88.cn 这种有多页的站点为例子来说明情况。这里建议把 sitemap, 也就是站点地图, 按照不同的模块进行拆分处理。具体来说就是让每一个文件里的 URL数量不要超过 5万个。这样做之后再分批地提交给搜索引擎使用。这样的操作方式能够让整体的抓取效率得到提升。
生效周期
百度搜索显示, 普通收录的时间范围通常在七到三十天之间, 而快速收录的周期则缩短为一至七天, 针对新站的初次收录, 其所需的等待时间相对更长, 常规情况下需要经历两到四周的过程。
Google的说法是, sitemap提交之后, 通常需要花3到14天的时间来完成首次抓取龙南市就业服务平台，至于能够完成整个索引的工作, 可能还需要好几周的时间。
常见失败原因与排查
如果在多次提交之后, 仍然没有看到任何效果, 那么请你在搜索引擎的地址栏里面输入“site:你的域名”这串字符来进行查询, 目的是搞清楚当前的收录情况是怎样的, 然后根据你找到的那些具体卡住不走的环节, 再去采取有针对性的处理措施。
补充提醒
域名收录这个事, 是搜索引擎优化的基础环节, 但是并不是一劳永逸的事情。内容要持续进行更新, 页面结构也要优化, 还有外部链接的建设, 这些都会影响着收录的稳定性。建议大家每个月去定期检查各个搜索引擎平台的抓取日志和收录状态, 根据实际情况及时调整自己的策略, 以此来保持索引的健康度。
