搜索引擎主要包括三个部分(搜索引擎大致由哪三个部分组成)

本文目录
搜索引擎大致由哪三个部分组成
一个搜索引擎由搜索器 、索引器 、检索器 和用户接口 四个部分组成。
搜索器的功能是在互联网 中漫游,发现和搜集信息。
索引器的功能是理解搜索器所搜索的信息,从中抽取出索引项,用于表示文档 以及生成文档库的索引表。
检索器的功能是根据用户的查询在索引库中快速检出文档,进行文档与查询的相关度评价,对将要输出的结果进行排序,并实现某种用户相关性反馈机制。
用户接口的作用是输入用户查询、显示查询结果、提供用户相关性反馈机制。
搜索引擎的三个工作模块是什么
一.网页搜集。
网页搜集,其实就是大家常说的蜘蛛抓取网页。那么对于蜘蛛(google称之为机器人)来说,他们感兴趣的页面分为三类:
蜘蛛从未抓去过的新页面。
蜘蛛抓去过,但页面内容有改动的页面。
蜘蛛抓取过,但现在已删除了的页面。
二.预处理。
预处理是搜索引擎最复杂的部分,基本上大部分排名算法都是在预处理这个环节生效。那么搜索引擎在预处理这个环节,针对数据主要进行以下几步处理:
提取关键词。
消除重复与转载网页。
重要信息分析。
网页重要度分析。
倒排文件。
三、查询服务
根据查询方式与关键词进行切词。
搜索结果排序。
展示搜索结果与文档摘要。
搜索引擎的工作过程分为哪几个阶段
搜索引擎的整个工作过程视为三个部分:蜘蛛在互联网上爬行和抓取网页信息,并存入原始网页数据库;对原始网页数据库中的信息进行提取和组织,并建立索引库;根据用户输入的关键词,快速找到相关文档,并对找到的结果进行排序,并将查询结果返回给用户。
1、网页抓取
Spider每遇到一个新文档,都要搜索其页面的链接网页。搜索引擎蜘蛛访问web页面的过程类似普通用户使用浏览器访问其页面,即B/S模式。引擎蜘蛛先向页面提出访问请求,服务器接受其访问请求并返回HTML代码后,把获取的HTML代码存入原始页面数据库。
2、预处理,建立索引
为了便于用户在数万亿级别以上的原始网页数据库中快速便捷地找到搜索结果,搜索引擎必须将spider抓取的原始web页面做预处理。网页预处理最主要过程是为网页建立全文索引,之后开始分析网页,最后建立倒排文件(也称反向索引)。
3、查询服务
在搜索引擎界面输入关键词,点击“搜索”按钮之后,搜索引擎程序开始对搜索词进行以下处理:分词处理、根据情况对整合搜索是否需要启动进行判断、找出错别字和拼写中出现的错误、把停止词去掉。接着搜索引擎程序便把包含搜索词的相关网页从索引数据库中找出,而且对网页进行排序,最后按照一定格式返回到“搜索”页面。
扩展资料
在信息抓取阶段搜索引擎掌握的信息往往是局部的,因而为搜索引擎设计一个好的抓取优先级策略并不是一件容易的事情,这里说的是一个深度抓取的优先策略。深度优先抓取它是以抓取到连接结构关系中的所有内容为主要目的的,具体实现方式是沿着树形的深度遍历树的节点,尽可能深的搜索树的分支,如果发现目标,则算法中止。
深度优先抓取过程中,抓取程序从起始页开始,一个链接一个链接跟踪下去,处理完这条线路最低端之后再转入下一个起始页,继续跟踪链接。
搜索引擎的组成是什么
组成:搜索引擎一般由搜索器、索引器、检索器和用户接口四个部分组成
原理:使用自动索引软件(搜索器,也称“网络机器人”或“网络蜘蛛”)来搜集和标记网页资源,并将这些资源存入数据库。当用户输入检索的关键词后,它在数据库中找出与该词匹配的记录,并按相关程度排序后显示出来。
特点:由自动索引软件生成数据库,所收录的网络资源范围广、速度快、更新及时。
缺点:缺乏人工干预,准确性差。
代表网站:Google、baidu。
全文搜索引擎又分为:拥有自己的检索程序和数据库的,如Google;租用其他搜索引擎数据库,按自定格式排列的,如Lycos。

更多文章:
重庆工商网上核名系统(线上工商注册:工商部门开放企业名称数据库企业核名更加便利)
2026年9月7日 16:40
网页设计怎么写查图片的(html网页制作中用图片做背景图片的路径怎么写啊高手指点谢谢拉)
2026年9月7日 15:00
东莞国际设计周(东莞松山湖国际创意设计城通透性怎样,周边的区域成熟度怎么样)
2026年9月7日 09:30
seo做的好的网站(6 大手机官网评比 哪家网页 SEO 做最好)
2026年9月7日 05:00






