搜索引擎发展史
随着互联网信息的爆炸式增长，如果用户想在互联网上找到他们需要的信息，就像大海捞针一样。此时，专业的搜索引擎已经出现，以满足公众对信息检索的需求。
在实际意义上，搜索引擎是由蒙特利尔大学的学生于1990年开发的；Alan Emage；Archie由开发。尽管当时；万维网；还没有，但网络中的文件传输已经相当频繁，而且由于大量文件分散在不同的FTP服务器中，因此形成了大量的信息源。Alan的Archie依靠脚本程序来搜索网络上的文件，然后对其进行索引以供用户查询。由于Archie非常受用户欢迎，受其启发，美国内华达州高等教育系统计算服务中心于1993年开发了另一个类似的搜索工具。该搜索工具不仅可以索引文件，还可以检索网页。
当时，“机器人”一词非常流行。“机器人”是指一种快速、不间断地执行任务的程序。由于专门用于检索信息的机器人程序像蜘蛛一样在网络中爬行，因此搜索引擎机器人程序也被称为蜘蛛程序。世界上第一个监测互联网发展规模的机器人计划
是；马修·格雷；发达的；万维网漫游者最初，它只用于计算互联网上的服务器数量。后来，它能够检索网站域名。以及；流浪者；相应地，Martin Koster；ALIWEB是Archie的HTTP版本，创建于1993年10月。ALIWEB不使用机器人，而是依靠网站主动提交信息来建立自己的链接索引，类似于雅虎分类目录。
随着互联网的快速发展，检索新网页变得越来越困难；马修·格雷；属于；流浪者；在此基础上，对传统的spider程序进行了改进。假设是，由于所有页面都可能有其他网站的链接，因此可以通过跟踪一个网站的链接来检索整个互联网。到1993年底，一些基于这一原则的搜索引擎开始出现，其中；JumpStation、万维网蠕虫；（后藤的前身Overture已被雅虎收购），以及；基于存储库的软件工程（RBSE）蜘蛛；最负盛名的。然而；跳站；以及；WWW蠕虫；根据搜索工具在数据库中找到匹配信息的顺序来排列搜索结果，因此不存在信息相关性。RBSE是第一个将关键字字符串匹配度的概念引入到搜索结果排列中的搜索引擎。现代意义上的搜索引擎最早出现于1994年7月；设置；约翰·莱维特；该网站的蜘蛛程序与它的索引程序相连，创建了Lycos，现在大家都知道了。同年4月，斯坦福大学的两名博士生大卫·费罗；Jerry Yang共同创立了超级目录索引Yahoo，并成功地使搜索引擎的概念深入人心。从那时起，搜索引擎进入了一个快速发展的时期。目前，互联网上有数百个带有姓名和姓氏的搜索引擎，它们检索的信息量已今非昔比。例如，谷歌声称数据库中存储的页面数量已达到40亿！
