2.1 搜索引擎发展史
随着现代社会互联网的迅速发展,能够接触到互联网的人越来越多。这些网民需要寻找什么东西时,只需打开百度或者谷歌,在搜索框输入需要找的信息,按回车键,便可以查到千千万万个结果,而网民广泛使用的这个工具,就是搜索引擎。图2-1所示为百度搜索界面。
图2-1
搜索引擎最早出现于1990年,当时还是用FTP服务器上传文件,并非网页传输。
1993年6月,历史上第一个Web搜索引擎Word Wide Web Wanderer出现,只做收集网址用。同年10月,第二个Web搜索引擎ALIWEB诞生,它可以检索标题、标签等信息,但文件主题内容还是无法索引。
1994年1月,Infoseek创立,稍后正式推出搜索服务,并允许站长向Infoseek提交网址。百度创始人李彦宏当时就是Infoseek的核心工程师之一。同年4月,杨致远与David Filo创立Yahoo!,当时作为人工收录网址用,“寄居”于斯坦福大学的域名。当月,第一个可以索引全文内容的搜索引擎WebCrawler推出,作为华盛顿大学的一个研究项目。之后,该搜索引擎于1995年、1996年分别被AOL和Excite收购。直到2001年停止研发,转而成为整合、显示多方搜索结果的元搜索引擎。2001年6月,Lycos创立,迅速成为最受欢迎的搜索引擎之一。
1995年4月,Yahoo!公司正式成立。1995年12月,Excite搜索引擎正式上线,一度成为当时最流行的搜索引擎之一。2001年,其母公司破产,被InfoSpace购买,2004年又被Ask Jeeves收购。
1995年12月,Alta Vista诞生,并在搜索引擎领域做了许多开创性的工作,一跃成为当时最受欢迎的搜索引擎,堪称当时的Google。当月,Infoseek成为当时霸主的网景浏览器的默认搜索引擎,曾占90%以上的市场份额。随后因微软免费浏览器IE的推出而逐渐衰败,2008年正式停止研发。
1996年3月,Larry Page与Sergey Brin在斯坦福大学开始名为BackRub的研究项目。该搜索引擎技术项目于1997年正式更名为Google。4月,Yahoo!上市。5月,Inktomi创立,是早期重要的搜索技术提供商,提供付费收录。当月,Hotbot成了,并使用Inktomi提供的数据。该搜索引擎在流行一段时间后于1998年被Lycos收购,之后转型显示来自Google、FAST、Teoma和Inktomi搜索结果的元搜索引擎。11月,Lycos以收录6000万文件高居当时最大的搜索引擎之首。与今天搜索引擎数据相比,真是小巫见大巫。
1997年4月,Ask Jeeves正式上线,2006年更名为Ask。由于当时采用纯人工录入搜索结果的方式,但网络上的信息量巨大,后来不得不使用其他搜索引擎的数据。
1998年GoTo(后改名为Overture)正式开始竞价排名业务,成为PPC点击付费广告形式的鼻祖。随后,Direct Hit创办,主要采用用户点击率列出搜索结果排名,而后被作弊者利用。年中,迪士尼控股Infoseek,并将其转型为门户网站。AltaVista被Compaq收购,并也被转型为门户网站,从此AltaVista走向没落。另外,Yahoo!放弃两年前使用的AltaVista,转而使用Inktomi的搜索数据。那时,Yahoo!只在用户搜索的网站未在其目录中时,才显示真正来自搜索引擎的数据。9月,Google公司正式成立。
1999年5月,AllTheWeb.com创建,作为搜索引擎技术公司FAST展示技术的平台。6月,NetScrpe放弃Excite,开始使用Google的搜索数据,对Google来说,是一个里程碑。年中,迪士尼将Infoseek流量转入Go.com,曾流行一时的搜索引擎Infoseek也不复存在,而Go.com几经波折目前尚默默无闻。Lycos也停止了自己的搜索技术研发,开始使用AllTheWeb的搜索数据。
2000年1月,Ask Jeeves花5亿美元的重金收购Direct Hit,却毫无进展。两年后,Direct Hit正式告终。当月,百度正式成立,作为搜索技术提供商。5月,西班牙公司Terra Networks收购Lycos,并更名为Terra Lycos,却无疾而终。7月,Yahoo!正式采用Google提供的搜索数据,培养出日后最强大的竞争对手。年中,GoTo.com基本放弃用自己网站吸引用户的做法,转而向多家搜索引擎及网站提供付费搜索服务。10月,Google推出AdWords,当时的CPM按显示付费模式并未获得成功。
2001年9月,Ask Jeeves收购Teoma,作为同样重视链接的搜索引擎,曾被认为可能是Google的最大竞争对手。10月,百度作为搜索引擎正式上线,百度竞价随即浮出水面,中文搜索随即迅速进入百度时代。
2002年3月,Google AdWords推出PPC形式,成为至今的AdWords主流模式。这个由Overture发明的搜索广告模式,却被Google发扬光大。Google也因此成为充分利用搜索的网络赚钱机器。5月,AOL放弃Inktomi,转用Google的搜索数据。10月,Yahoo!放弃先返回其目录数据的做法,也完全采用Google的搜索数据。随后,收购Inktomi,为次年一些收购和整合拉开序幕。
2003年2月,Overture收购AltaVista和FAST的搜索技术部门,因此其也拥有了当时两大主要搜索技术公司。3月,Google推出后来被称为Adsense的内容广告系统。7月,Yahoo!以16亿美元收购Overture,将除了Google之外的几乎所有主流搜索技术收归旗下。Overture的PPC广告平台被整合,改名为Yahoo!搜索市场。同年,微软MSN终于开始开发自己的搜索引擎技术。而国内的百度推出多种搜索方式,并将搜索领入社区化时代。
2004年2月,Yahoo!宣布不再使用Google的搜索数据。8月,Google上市。11月,微软推出自己的搜索引擎MSN Search,不再使用第三方搜索引擎技术。三国鼎立的局面正式拉开。
2005年,百度上市。
2006年5月,微软推出类似于Google AdWords的广告系统AdCenter。随后,MSN网络品牌产品全部改为Live标识。Google正式确定其全球中文名字为“谷歌”,并进军中国市场。
百度宣称比Google“更懂中文”,稳固国内搜索引擎霸主地位。
2007年,Google开始提供类似网站联盟的按转化付费的广告形式。随后又收购网络广告公司DoubleClick,进入更广泛的网络广告领域。
2009年,微软Live Search改名为Bing,并与Yahoo!达成历史性协议。Yahoo!将逐步放弃自己的搜索技术,转用Bing的数据,之前的努力也付之东流。
2010年,Yahoo!正式采用Bing的搜索数据。同时,Google在旗下Chrome浏览器中推出了Google Instant。即用户在输入关键词(并未按搜索按钮或Enter键)时,即可看到搜索结果。
2011年,Google推出减少搜索结果页中低质量内容的熊猫算法;百度推出百度站长平台,可以查询网站外链数据。
2012年4月,Google推出企鹅算法,打击低质量外链;8月,360推出360搜索。
2013年2月,百度推出绿萝算法,打击参与买卖链接的网站;5月,百度推出石榴算法,打击低质量内容页面;5月,百度推出星火计划,邀请优质原创网站共同参与此项计划,携手站长点亮原创价值之光;7月,百度推出绿萝算法2.0,继续打击购买链接行为,主要是付费软文外链;8月,Google推出蜂鸟算法,这是一次对整体排名算法的重写。
2014年8月,百度推出移动搜索冰桶算法,针对低质站点及页面进行一系列调整。9月,yahoo!宣布年底关闭网站目录。
2016年1月,百度星火计划2.0清查违规站点,提高搜索引擎原创质量;7月,百度移动搜索冰桶算法3.0版本将严厉打击在百度移动搜索中,打断用户完整搜索路径的调起行为。
搜索引擎技术领域一直都在进行着不断的革新。了解搜索引擎历史,有助于网站SEOer及站长朋友理解搜索引擎营销的发展与变革,可对未来的预期提高精准度。