当前位置:首页百度lee:搜索引擎索引系统概述(一) 举报文章

百度lee:搜索引擎索引系统概述(一)

作者:admin    来源:用户投稿    时间:2015.6.10   

  从上次8月份百度站长平台lee发布关于搜索引擎抓取信息后2个月已经过去,这次lee继续发布了搜索引擎索引系统的信息。不管怎么样,木木SEO认为百度官方的公告我们还是要了解和分析的。下面是百度官方公告:

  众所周知,搜索引擎的主要工作过程包括:抓取、存储、页面分析、索引、检索等几个主要过程。过去几周给大家介绍了抓取相关的简要过程。今天简要介绍一下索引系统,以亿为单位的网页库中查找特定的某些关键词犹如大海里面捞针,也许一定的时间内可以完成查找,但是用户等不起,从用户体验角度我们必须在毫秒级别给予用户满意的结果,否则用户只能流失。怎样才能达到这种要求呢?

  如果能知道用户查找的关键词(query切词后)都出现在哪些页面中,那么用户检索的处理过程即可以想象为包含了query中切词后不同部分的页面集合求交的过程,而检索即变成了页面名称之间的比较、求交。这样,在毫秒内以亿为单位的检索成为了可能。这就是通常所说的倒排索引及求交检索的过程。如下为建立倒排索引的基本过程:

  

  (1)页面分析的过程实际上是将原始页面的不同部分进行识别并标记,例如:title、keywords、content、link、anchor、评论、其他非重要区域等等;

  (2)分词的过程实际上包括了切词、分词、同义词转换、同义词替换等等,以对某页面title分词为例,得到的将是这样的数据:term文本、termId、词类、词性等等;

  (3)之前的准备工作完成后,接下来即是建立倒排索引,形成{termàdoc},可以粗略的理解为如下,为什么是【term->doc】,而不是直接应用【doc->term】呢?

  

  上述即是索引系统中的倒排索引过程,是搜索引擎实现毫秒级检索非常重要的一个环节。

  好了,以上就百度发布的全文了,当然是很简单的,想了解更多可以看木木SEO的《不懂搜索引擎原理就是在裸奔》,我想大家在里面可以了解得更详细。另外上面文章里面的几个词可能大家不理解,简单的说一下:term就是单词文本,即关键词;termID就是单词标识。

  文章编辑自:木木SEO博客 http://blog.sina.com.cn/mumuhouzi

好文打赏,给Ta鼓励
扫一扫用手机阅读本文
Tags:百度  搜索  搜索引擎  索引  引擎  系统  概述  
  • 相关搜索
图片推荐
    Kindrid创始人:2013年我学到的创业17件事

    Kindrid创始人:2013年我学到的创业17件事

    2013年是我们Kindrid终于在市场中找到自己的位置的一年。从4月份开始,业务的各项关键指标都每月翻倍或三倍的增长。  我们从市场研究到产品开发,到beta测试,到实现,到规模扩大,下面这些就是在
    面对更新不定的百度我们的优化之路该如何进行?

    面对更新不定的百度我们的优化之路该如何进行?

    进入七月份的搜索引擎似乎更新更加的频繁了,刚进入七月,百度便推出了绿萝2.0更新公告,主要针对新闻源以及软文的的网站进行打击。自七月中旬开始百度便开始对各类网站进行大范转的处理。基本上在互联网中做过软
    风口之上,生活O2O创业往哪飞?

    风口之上,生活O2O创业往哪飞?

    如果说BAT掌握着庞大的支付系统和移动互联网入口,那么创业者至少很长一段时间内是无法撼动大平台的,生活O2O跑马圈地的时代,创业者如何掌握市场先机,从风口起飞?    垂直细分化:调整重组产品定位及运
    SEOer悲剧   百度搜索左侧推广位增至10个

    SEOer悲剧 百度搜索左侧推广位增至10个

    刚过完端午节,百度又给各位小伙伴们一个惊喜。细心的小伙伴应该已经发现了,搜素竞争度强的关键词,百度左侧展示的广告由原来的8个变成原来的10个。而从百度推广的后台管理也可以看到,之前最多显示到8名,现在
    晨兴创投刘芹:关于创业战略的三大建议

    晨兴创投刘芹:关于创业战略的三大建议

    昨天雷总和大家分享了关于他的一些创业总结,提到了所谓的台风和猪的理论,其实本质上是讲战略的意思。沿着这个战略的话题,我和大家分享一下自己的理解。  我今天先要谈的是在战略选择上,首先要客观冷静捕捉大的
    三招助你移动端推广转化提升3倍

    三招助你移动端推广转化提升3倍

    元宵节过后,春节算是真正过完了,接下来就需要我们为2015奋斗、拼搏了,而操作产品在当今绝对是一个非常不错的选择,坚持一年,手里存个几十万、上百万都是有可能的,今天武龙杰就给家分享3个提升移动端推广转
    新人必看:呕心沥血网络营销培训心得体会

    新人必看:呕心沥血网络营销培训心得体会

    图:网络营销体系概念计划  2014年,阿里巴巴、京东、陌陌、猎豹等互联网企业纷纷上市,融资千亿美元,网络营销大潮再次席卷全球。李克强总理在两会上提出互联网+计划,更是将中国互联网的发展推向了一个新阶
你是怎么知道非凡网赚网的?
  •   
  • 联系QQ 邮箱:976382653@qq.com 微信:976382653
    在线留言
    发布软文
    广告自助购
    文章调用
    常见问题
    保存到桌面