在前文已经谈论过搜索引擎的三大服务方式，而三大服务方式出现的过程也就是搜索引擎从无到有的发展过程。当然系统的来说搜索引擎的发展历史将会是长篇大论，若是大家对搜索引擎有着浓厚的兴趣，我推荐大家可以去买关于搜索引擎发面的书籍。
Archie FAQ可以说是所有搜索引擎的祖先，它是由Montreal的McGill University学生Alan Emtage、Peter Deutsch和Bill Wheelan)在1990年发明的。在1990年之前是没有人可以搜索互联网。Archie是世界上第一个自动索引互联网上匿名FTP网站文件的程序，是用文件名查找文件的系统，从某种意义上说它还不是真正的搜索引擎，用户必须输入精确的文件名搜索，才可以找到哪一个FTP地址可以下载该文件。但是在当时这已经是很不错了。因为Archie深受欢迎，Nevada System Computing Services大学在1993年的时候开发了一个Gopher(Gopher FAQ)搜索工具Veronica(Veronica FAQ)。 MIT Matthew Gray的World wide Web Wanderer则是世界上第一个Spider程序，起初只是用来来统计互联网上的服务器数量，后来发展为能够捕获网址(URL)。也就是我们现在的百度蜘蛛，谷歌蜘蛛，在seo优化中，熟知蜘蛛的抓取规则很重要。
1993年2月。由当时的一个以车库为办公室的软件公司Architest Software研发的 Excite，它不仅能够提供关键词的搜索，也能够提供概念搜索，在2002年5月的时候，被Infospace收购，同时也停止了自己的搜索引擎，最后改用元搜索引擎的Dogpile 。
1994年4月，斯坦福大学的美籍华人杨致远和David Filo创办了Yahoo!，当时的访问量和收录链接数迅速增长，Yahoo目录同时也就开始支持简单的数据库搜索。它收录的网站的搜索效率特别高 ，后来Yahoo也陆续有 Altavista、Inktomi、Google提供搜索引擎服务，可以说Yahoo!就是20世纪90年代的因特网的代名词！
1995年，元搜索引擎(Meta Search Engine)出现。世界上第一个元搜索引擎是Washington大学硕士生 Eric Selberg 和 Oren Etzioni 的 Metacrawler。用户只要提交一次搜索请求，元搜索引擎就会在转换处理后提交给用户多个预先选定的独立搜索引擎，并且从各独立搜索引擎返回经过处理后的所有查询结果。
1995年12月，DEC的发布AltaVista，AltaVista也是世界第一个支持自然语言搜索的搜索引擎和世界第一个实现高级搜索语法的搜索引擎(如AND、 OR、 NOT等)。我们能够用AltaVista搜索内容并获得文章，还能够搜索图片名称中的文字、搜索Titles、搜索Java applets、搜索ActiveX objects。它也是世界第一个支持用户自己向网页索引库提交或删除URL的搜索引擎，且24小时内上线。1997年，它发布放入一个图形演示系统LiveTopics帮助用户从成千上万的搜索结果中找到想要的网页信息。
1996年5月20日，Inktomi公司宣布成立，其实在1995年9月26日的时候就已经由加州伯克利分校助教Eric Brewer、博士生Paul Gauthier创立了，它当时声称每天能抓取索引1千万页以上。
1997年8月，Northernlight搜索引擎出现。尽管它没有Stop Words，但是却有出色的Current News、7100多出版物组成的Special Collection以及良好的高级搜索语法，同时也是世界上第一个支持对搜索结果进行简单的自动分类的搜索引擎。
1998年9月27日，Google公司成立，它以前只是斯坦福大学(Stanford University)的一个小项目BackRub，在1997年9月15日注册了google.com的域名，1997年底BachRub开始提供Demo。1999年2月，Google完成了从Alpha版到Beta版的蜕变过程。它是以网页级别(Pagerank)为基础来判断网页的重要性，这也使得搜索结果的相关性大大增强。2006年4月，Google宣布以中文名称“谷歌”进驻中国，2010年3月退出中国。
以上这些是国外的一些搜索引擎公司的发展过程。在中国，sohu公司成立最早，它是专业制作中文网站分类目录的，有“出门找地图，上网找搜狐”的称誉。2004年8月独立域名的搜索网站“搜狗”自称“第三代搜索引擎”。其个性化的搜索引人注目。接下来就是百度搜索引擎，它是2000年1月由两位北大校友李彦宏与好友徐勇(加州伯克利分校博士后)在北京中关村创立的。2001年8月发布Baidu.com搜索引擎Beta版，2001年10月22日发布Baidu搜索引擎。当然它还有其他的特色，包括：百度快照、网页预览/预览全部网页、相关搜索词、错别字纠正提示、mp3搜索、Flash搜索等等。
可以说，中国搜索引擎的起步较晚，但后劲十足。在seo学习和seo优化中，我们应该时刻关注国外搜索引擎的发展趋势，也要关注国内的发展趋势。毕竟互联网的更新速度太快，尤其是对于我们seo优化人员来说！
