当前位置:首页百度lee:搜索引擎索引系统概述(一) 举报文章

百度lee:搜索引擎索引系统概述(一)

作者:admin    来源:用户投稿    时间:2015.6.10   

  从上次8月份百度站长平台lee发布关于搜索引擎抓取信息后2个月已经过去,这次lee继续发布了搜索引擎索引系统的信息。不管怎么样,木木SEO认为百度官方的公告我们还是要了解和分析的。下面是百度官方公告:

  众所周知,搜索引擎的主要工作过程包括:抓取、存储、页面分析、索引、检索等几个主要过程。过去几周给大家介绍了抓取相关的简要过程。今天简要介绍一下索引系统,以亿为单位的网页库中查找特定的某些关键词犹如大海里面捞针,也许一定的时间内可以完成查找,但是用户等不起,从用户体验角度我们必须在毫秒级别给予用户满意的结果,否则用户只能流失。怎样才能达到这种要求呢?

  如果能知道用户查找的关键词(query切词后)都出现在哪些页面中,那么用户检索的处理过程即可以想象为包含了query中切词后不同部分的页面集合求交的过程,而检索即变成了页面名称之间的比较、求交。这样,在毫秒内以亿为单位的检索成为了可能。这就是通常所说的倒排索引及求交检索的过程。如下为建立倒排索引的基本过程:

  

  (1)页面分析的过程实际上是将原始页面的不同部分进行识别并标记,例如:title、keywords、content、link、anchor、评论、其他非重要区域等等;

  (2)分词的过程实际上包括了切词、分词、同义词转换、同义词替换等等,以对某页面title分词为例,得到的将是这样的数据:term文本、termId、词类、词性等等;

  (3)之前的准备工作完成后,接下来即是建立倒排索引,形成{termàdoc},可以粗略的理解为如下,为什么是【term->doc】,而不是直接应用【doc->term】呢?

  

  上述即是索引系统中的倒排索引过程,是搜索引擎实现毫秒级检索非常重要的一个环节。

  好了,以上就百度发布的全文了,当然是很简单的,想了解更多可以看木木SEO的《不懂搜索引擎原理就是在裸奔》,我想大家在里面可以了解得更详细。另外上面文章里面的几个词可能大家不理解,简单的说一下:term就是单词文本,即关键词;termID就是单词标识。

  文章编辑自:木木SEO博客 http://blog.sina.com.cn/mumuhouzi

好文打赏,给Ta鼓励
扫一扫用手机阅读本文
Tags:百度  搜索  搜索引擎  索引  引擎  系统  概述  
  • 相关搜索
图片推荐
    企业号能用微信支付了 未来可发工资

    企业号能用微信支付了 未来可发工资

    [摘要]开通微信支付功能后企业号将拥有两项最基本也是最重要的的能力收款和付款。  腾讯科技讯(余一)6月24日,微信团队表示,已认证的企业号可以在企业号管理平台的服务中心-微信支付入口里申请开通微信支
    如何进行视频网站网络营销引流

    如何进行视频网站网络营销引流

    近几年视频直播网站做得是风声水起,日进斗金。据消息称:六间房、YY、网易BOO、斗鱼、秀90这类的大型直播网站年营业额都高达几个亿之多,分别是5亿、2.5亿、1.5亿、5000万、3000万,市值就不
    如何利用微信导航站和微信群站加粉

    如何利用微信导航站和微信群站加粉

    说到微信加好友,方法很多,通过图片水印、通过推广二维码、通过QQ群、通过附近的人、通过微博、通过软文推广、通过活动等等,介绍这些方法的文章有很多,这里不再过多说明。不要嫌慢,也不要嫌麻烦,在你抱怨的时
    从papi酱拍卖广告初夜权说起 网红的9个大胆随想

    从papi酱拍卖广告初夜权说起 网红的9个大胆随想

    关于Papi酱获得了包括逻辑思维及各种基金联合1200万元投资的朋友圈已经被刷爆了。坤鹏论在这两天简直要被这件事给轰炸残废了!脑浆沸腾,浮想连篇,现在记录下来,与大家分享!  随想一:中国网红的标志性
    微商营销群体划分 两类人群占据朋友圈微商

    微商营销群体划分 两类人群占据朋友圈微商

    微信朋友圈的本质就是一个社交群,被发现有利可图的人炒出了微商,微商起于代购和达人推荐,兴于面膜,最后毁于代理。但这并不代表微商不应该存在,只是需要一个过程去磨合,以一种完善的形式存在下去。  面膜事件
    美国加州VPS主机推荐

    美国加州VPS主机推荐

    美国加州VPS主机是指服务器位于美国加州的机房或数据中心。从地理位置来说,加州距离国内近,位于该地机房的服务器在国内访问很快,再加上免备案、资源足等优势,理所当然的成为国内用户较为青睐的建站空间。美国
你是怎么知道非凡网赚网的?
  •   
  • 联系QQ 邮箱:976382653@qq.com 微信:976382653
    在线留言
    发布软文
    广告自助购
    文章调用
    常见问题
    保存到桌面