搜索引擎简史笔记

时间：2023-03-06 09:00:02 | 来源：电子商务

时间：2023-03-06 09:00:02 来源：电子商务

2006年低，接到一个朋友的委托，帮忙整理搜索引擎的发展历史，于是春节期间花了点时间整理出来一份粗糙的简史。以为自己研究互联网历史的一点笔记吧。

1、搜索引擎的发展历史

1）搜索简史History of Search

缘起“亚奇”

    网络搜索引擎的历史可以追溯到1991年。最早的搜索引擎是麦吉尔大学（McGill University）开发的“亚奇”（Archie）。“亚奇”允许对网站上的文件名进行关键词搜索。

    1992年“Gopher”（万维网的先驱）的降临带来了“维罗妮卡”（Veronica）搜索引擎的诞生（Poulter，1997），它允许多词检索和布尔检索（就是可以使用and和or等运算符搜索）。尽管有这些早期的进步，1994年才真正算互联网发展的一个分水岭，不仅仅因为在这一年里万维网开始普及，还因为在这一年中出现了两个项目，后来都被当作免费服务对公众开放——它们共同改变了互联网发展的历程。

    到1994年，今天互联网流行的两类搜索服务——关键词搜索和主题目录就已出现（Poutler，1997）。第一个成功的全文关键词搜索引擎“网络爬行者”（Webcrawler）那时也诞生了，并且发展成为最成功的早期“网络机器人”（Web Robot)之一（注释2：本质上，网络机器人是一种不断在网络上巡游的程序，它随着连接去寻找网页并自己月度网页。每发现一个页面，就将它复制到数据库中，这样人们利用关键词就能找到它。）。在网上寻找信息方面的技术进展受到了广泛欢迎。布赖恩·平克顿（Brian Pinkerton）的“网络爬行者”很快带动了现在更有名的搜索引擎如Lycos和AltaVista的出现。

    1994年1月，第一个既可搜索又可浏览的分类目录EINet Galaxy（Tradewave Galaxy）上线，除了网站搜索，它还支持Gopher和Telnet搜索。

雅虎出现

    这一年4月，斯坦福（Stanford）大学的两名博士生，David Filo和美籍华人杨致远（Gerry Yang）共同创办了超级目录索引Yahoo，并成功地使搜索引擎的概念深入人心。从此搜索引擎进入了高速发展时期。Stanford两名博士生，美籍华人Jerry Yang（杨致远）和David Filo共同创办了Yahoo。随着访问量和收录链接数的增长，Yahoo目录开始支持简单的数据库搜索。因为Yahoo!的数据是手工输入的，所以不能真正被归为搜索引擎，事实上只是一个可搜索的目录。但雅虎的出现使得分类搜索进入搜索引擎的视野，由于搜索效率的明显提高，非常受欢迎。Yahoo此后陆续采用Altavista、Inktomi、Google提供搜索引擎服务，是搜索引擎发展中很多主要技术的跟踪者和推行者，因此其存在对于搜索引擎来说意义非常，由于并非本文的主题，因此不在此赘述。

全文搜索

    1994年4月20日，WebCrawler正式亮相。WebCrawler是互联网上第一个支持搜索文件全部文字的全文搜索引擎，后来webcrawler陆续被AOL和Excite收购，现在和excite一样改用元搜索引擎Dogpile。此后全文搜索渐渐成为大多数搜索引擎的功能。

现代意义的搜索引擎

    Lycos，号称最早的现代意义上的搜索引擎出现于1994年7月。当时Michael Mauldin将John Leavitt的蜘蛛程序接入到其索引程序中，创建了大家现在熟知的Lycos。Lycos（Carnegie Mellon University Center for Machine Translation Announces Lycos）是搜索引擎史上又一个重要的进步。Carnegie Mellon University的Michael Mauldin将John Leavitt的spider程序接入到其索引程序中，创建了Lycos。1994年7月20日，数据量为54,000的Lycos正式发布。除了相关性排序外，Lycos还提供了前缀匹配和字符相近限制，Lycos第一个在搜索结果中使用了网页自动摘要，而最大的优势还是它远胜过其它搜索引擎的数据量：1994年8月－－394,000 documents；1995年1月－－1.5 million documents；1996年11月－－over 60 million documents。（注：1999年4月，Lycos停止自己的Spider，改由Fast提供搜索引擎服务）