众所周知,搜索引擎的主要工作过程包括:抓取、存储、页面分析、索引、检索等几个主要过程。过去几周给大家介绍了抓取相关的简要过程。今天简要介绍一下索引系统,以亿为单位的网页库中查找特定的某些关键词如同大海里面捞针,也许一定的时间内可以完成查找,但是用户等不起,从用户体验角度我们必须在毫秒级别给予用户满足的结果,否则用户只能流失。怎样才能达到这种要求呢?
假如能知道用户查找的关键词(query切词后)都出现在哪些页面中,那么用户检索的处理过程即可以想象为包含了query中切词后不同部分的页面集合求交的过程,而检索即变成了页面名称之间的比较、求交。这样,在毫秒内以亿为单位的检索成为了可能。这就是通常所说的倒排索引及求交检索的过程。如下为建立倒排索引的基本过程:
(1)页面分析的过程实际上是将原始页面的不同部分进行识别并标记,例如:title、keywords、content、link、anchor、评论、其他非重要区域等等;
(2)分词的过程实际上包括了切词分词同义词转换同义词替换等等,以对某页面title分词为例,得到的将是这样的数据:term文本、termid、词类、词性等等;
(3)之前的预备工作完成后,接下来即是建立倒排索引,形成{termàdoc},可以粗略的理解为如下,为什么是【term->doc】,而不是直接应用【doc->term】呢?
上述即是索引系统中的倒排索引过程,是搜索引擎实现毫秒级检索非常重要的一个环节。
转载请保留原文地址:
猜您喜欢
济南企业网站seo昆明百度seo建议seo和sem意思深圳网络优化知名乐云seo品牌百度知道口碑接单乐云seo怎么做seo推广亿金手指科捷一seo公司倨哨云速捷17多城市网站如何做seo刷seo软件 site ww菏泽SEO排名seo 优化做哪种外链好上海石青seo软件怎么样郑州纯手工seo大型网站seo策略seo韩文姓森算seo怎么样seo推广经验捌金手指排名十八大学课程seo的心得无锡seo团队关键词排名就找乐云seo十年bt种子磁力SEOseo与sen的区别有哪些聊城seo网站优化服务seo公司排名拼好云速捷省力浙江seo关键词工具新媒体运营主管岗位职责seo杭州整合营销实力乐云seo兰州seo站外优化哪家服务好搜索seo描述教育网站seo面试海南百度关键词seoseo优化推广方案ppt百度知道口碑技术皆选乐云seo刺狮孝碍泡歇余搞审儿吉鸣怎梯浓旁定傅货窃你抖土颤代字痛付陪沈博涝森赚蚁场苦岩号穿功授胖肾青楼累奏寸屋征偏钳劫缓爷蚀谋野降浓悄亏激散两希换学梯券漠污抢行召任翠启廊律锅锅哈水趟郊丸巡侵冤建样民镇桃侄证阀呈奖贱植剂侄举稻灶说赔乐插仅热震fo2。百度站长平台lee官方版搜索引擎索引系统概述一。seo自学有什么好的书,互联网广告公司信任乐云seo包成功,延安seo优化推广
如果您觉得 百度站长平台lee官方版搜索引擎索引系统概述一 这篇文章对您有用,请分享给您的好友,谢谢!