垂直搜索框架

时间：2022-02-12 11:00:01 | 来源：信息时代

时间：2022-02-12 11:00:01 来源：信息时代

抓取

也就是蜘蛛程序，负责从信息源抓取数据，蜘蛛程序通常是基于预先构造的模板工作的，无模板的蜘蛛程序只能处理结构相对简单的信息，抓取系统涉及的关键技术点有爬行路径分析、增量抓取与全抓取、信息构造完整性、信息唯一性识别、多网页信息整合、自动标引（此功能也可以单独提出）等。

索引

把抓来的信息建立类似书目的数据文件，以便于实现高速检索。索引系统涉及的关键技术点有分词技术、预评分和后评分、增量索引与全索引、排序技术、热点词高速缓存、标准检索语句解析等。

搜索

就是提供搜索功能的网站，网站的具体表现形式大不相同，但是都提供全文搜索功能，除了搜索功能外，还提供与业务相关的其他功能，譬如按地域导航检索、会员注册、订阅等。很多人把GOOGLE、百度称之为站外搜索，而把其他基于数据库的搜索称之为站内搜索，其实所有的搜索引擎提供的都是站内搜索，数据都是预先存储在本地的。