为了要确认域名是否被搜索引擎抓取并且收录, 最直接的方式是进行组合使用, 也就是要用到搜索引擎指令、站长控制台诊断, 还有第三方检测工具这三类手段。下面所提供的是完整而且可操作的检查流程。

使用搜索引擎"site:"指令(最快验证)

操作步骤:

1. 找到那些大家经常用的搜东西的网站, 比方说百度这个, 或者Google那个, 又或者是Bing这个都可以, 然后把它们给打开。

2. 搜索框输入:site:你的域名(例如 site:example.com)。

3. 大家可以把目光放到那个显示了搜索结果的那个页面上去看看。

判断标准:

当在搜索结果里面看到属于你的那个域名的网页的显示的话, 那就意味着这个页面已经被搜索引擎给抓取的并且进行了收录的操作。

如果出现类似显示未找到相关结果这种情况, 又或者展示出来的结果的个数是少之又少的这样一种状态, 那么在很大程度上就意味着咱们所说的这个域名目前可能是还没有被搜索引擎实现有效的收录操作。

需要特别注意到, 搜索引擎在收录数据方面有延迟的情况存在,对于新提交的网站站点来说, 通常需要等待大概7到14天的时间, 才能够在搜索结果里面看到相关的体现情况。

登录搜索引擎控制台(最权威)

Google Search Console:

1. 你要去访问那个网址, 也就是 search.google.com/search-console 这个地方, 然后要把你的域名给添加进去, 最后还得进行验证。

2. 进入“索引”, 然后点击“已编入索引的页面”这个小按钮, 最后查看一下当前已经收录了多少个页面的数量。

3. 进入“抓取统计信息”这个页面, 然后确认最近那次抓取的时间是什么时候, 还有抓取的频率怎么样。

百度站长平台(ziyuan.baidu.com):

域名被收录了吗?快速检查是否被抓取的完整方法(图1)

1. 你得先去注册一个账号, 并且还要做一件事情就是验证站点的属主身份。

2. 在索引量那个地方, 查看一下收录页面数的数据。

3. 通过那个资源平台把这个URL给提交上去, 然后去跟踪这个收录的进度。

使用第三方SEO检测工具

人们可以在 gname.xin 之类的域名服务平台上进行操作。大家也可以使用 Ahrefs、Sistrix、5118 这样的工具来帮忙。只要输入相应的域名就能开始工作。这样做可以把多个搜索引擎里面的情况一次性都查清楚。

需要查询的内容包括了收录页面的具体数目。还需要看看索引有没有变化的趋势。另外还要查看抓取的状态是否正常。这种方式特别适合那些要求很高的场景。比如说要一次性覆盖很多不同的搜索引擎。比如说要检查很多不同地区的索引状态。

抓取与收录的区别(避免误判)

抓取就是搜索引擎里的爬虫程序去访问了你的页面, 这不代表说该页面就已经被收录进去了。

收录就是指页面被纳入了搜索索引库, 用户在进行搜索操作的时候, 有可能得到展示。

仅仅状态显示为“被访问过”, 这并不表示已经被收录了, 需要到搜索结果里面去查看, 如果你的网址确实在那里面实际出现了, 这样才能作为最终的判断标准。

常见疑难与应对

提交后长期未收录的情况, 大家需要去检查 robots.txt 这个文件, 看一下它是不是屏蔽了抓取的路径;同时得确认 sitemap.xml , 看它有没有正确地提交上去;另外还得排查那些页面是否存在大量重复内容的事情, 或者有没有低质量的标记出现。

收录的页面忽然不见, 请去控制台里看关于"取消编入索引"的报告, 检查一下是不是因为主动把它移走了, 或者是服务器长时间没法使用, 又或者是被标成了垃圾站点。

有些页面已经被收录了, 而另外一些页面没有被收录。需要一页接着一页地去检查HTTP状态码。如果200表示可以正常访问, 301表示已重定向。404表示找不到页面。要确保那些有效的页面都能被正常访问到。同时要避免它们被noindex指令给屏蔽掉了。

先按照以上这个流程一个接一个地去做, 然后就可以非常精确地去进行判断了, 具体判断什么呢? 主要是去判断当前的域名是不是处于被搜索引擎抓取的状态, 并且也确实是属于有效收录的范围里面了, 这样的话, 就不需要再去四处寻找其他额外的那些资料来辅助了。