按键盘上方向键 ← 或 → 可快速上下翻页，按键盘上的 Enter 键可回到本书目录页，按键盘上方向键 ↑ 可回到本页顶部！
————未阅读完？加入书签已便下次继续阅读！
恼镜悖谢崮鼙弧ahoo在短时间内再次索 引。相比百度，Yahoo 的反作弊策略更显人性化，避免了许多恶意的指责和猜测。 而以最近推出 Sogou Rank 的搜狗，一直以来对待删除站点的惩罚措施中都注明： “被搜狗视为有作弊行为的网站，在清除作弊内容后，可以向我们写信申请解除处罚： anti_spam@sohu，经过搜狗监控人员的审查，如果确认网站已经不存在作弊行为，搜狗 将恢复对该网站的正常收录。”（来源：sogou/docs/help/webmasters。htm） 对于 Google，事实上也是有跟上面这种差不多的条款的：“If your site has violated our webmaster guidelines； and you’ve made changes to it so that it meets our guidelines； you can request reinclusion and we’ll evaluate your site。 ”中文意思即为：如果你的站点背离了我们的网络管理员须知，但是你已经作出了相应的改变，并符合了我们的要求，那么你可以重新要求我们评估并收录你的站点。 在实际操作中，能够得到 Google 重新评估和收录的站点并不多。如果站点本身就有一定的专业性和影响力，那么按照Google 这样的指示，还是有机会被Google 重新收录的。石头曾按照上面的提示，帮助了一个在某一领域有重要影响力的站点被Google 重新收录。 遗憾的是，在百度的站点上目前还找不到类似意思的文字。但从上面这几大搜索引擎的表现来看，搜索引擎反作弊越来越考虑一些人性化的东西。比如 Google 的Matt Cutts的博客，也可以理解成 Google 反作弊人性化的一种理解。以前那种搜索引擎站在绝对统治，霸权地位的思维方式只会遭到更多人的质疑。 搜索引擎反作弊增加一点人性化的手段，能够迅速地缓解很多的误解和批评。特别是对于广大网站管理员，给予一个重新的机会能够获得他们的人心。而且最重要的一点是，人性化的存在，能够避免搜索引擎机器可能的出错。虽然机器能够做到更公正公平，但是谁能保证机器不会犯错呢？七、搜索引擎反作弊的法律支持 搜索引擎反作弊也引起了许多争议，很多站点因为不服搜索引擎对自己站点的惩罚行为而提起诉讼。尽管目前尝无任何法律对搜索引擎反作弊进行解释。但是基本的商业道德和搜索道德，还是赢得了法律的尊重。 Google及其它搜索引擎已经多次因网页排名遭遇诉讼，但提起诉讼的一方从未获得过胜利，这是法律对于搜索引擎反作弊行为态度的最好解读。在国内方面，百度在 2006 年底也赢得了第一起搜索引擎作弊案。 2006年初，枫叶之都使用百度搜索竞价排名时，发现自己的网站在许多与加拿大旅游相关关键词的搜索排序中发生了巨大变化――从前十位被调到倒数第一或第二页中。由此，枫叶之都认为，百度存在人为干涉搜索结果的可能，为配合其竞价排名销售推广业务，百度对该公司的搜索结果进行了人为技术降权和恶意锁定，构成不正当竞争，因此要求百度道歉并赔偿经济损失 10 万元。 百度就此解释称，枫叶之都网站在百度搜索排名中的位置变化，是百度搜索引擎算法策 略自动计算所为。枫叶之都网站存在大量针对搜索引擎的垃圾链接，被百度搜索引擎算法规 则系统识别，并调整了其网站权值所致。据百度提供给法院的证据显示，枫叶之都在多个压 缩机、干燥机等与旅游业不相关的网站以及私人博客和留言板上进行了大量、重复的网站链 接。而这种与该公司网站内容无任何关联性的网站超过百家。2006年 3月，枫叶之都的大量垃圾外链被百度的自动反垃圾外链系统发现，自动将其排名压后。 北京一中院经审理后判定，枫叶之都采用垃圾链接方式违反了搜索引擎业相关规则。 值得注意的是，在这次判决中，北京一中院为搜索引擎搜索结果的排名方式给出了法律界定：对于排名算法规则的设置尚没有明确的法律规定或行业规定，故各搜索引擎网站均自行设定排名算法规则。“这也表明了对于百度目前采用的‘竞价排名’和‘自然排名’相关规则在法律上获得的肯定。”
第十四章 附录
第一节 搜索引擎发展史 搜索引擎从一种技术、一种应用工具，已经演变成一种生活习惯、一种商业平台和一个巨大的产业了。我们不妨从了解搜索引擎的发展历史入手，来深入认识搜索引擎。一、搜索引擎编年史：全球 搜索引擎是早于万维网出现的，但是在万维网出现之前，搜索引擎还仅仅是实验室的工具，并没有能够成为大众的工具。短短的十多年的时间，搜索引擎除了在技术上的进步有目共睹之外，这种技术的应用对互联网乃至大众生活产生的影响是任何一个搜索引擎发布之初都没有办法预见的。 1990 年1990 年 12 月 蒙特利尔大学的学生Alan Emtage 发明了Archie。虽然当时World Wide Web 还未出现但网络中文件传输还是相当频繁的，而且由于大量的文件散布在各个分散的 FTP主机中，查询起来非常不便，因此Alan Emtage 想到了开发一个可以以文件名查找文件的系统，于是便有了Archie 。Archie的工作原理与现在的搜索引擎已经很接近，它依靠脚本程序自动搜索网上的文件，然后对有关信息进行索引，供使用者以一定的表达式查询。 1991 年1991 年4 月 明尼苏达大学（University of Minnesota ）的一个研究小组开发出了Gopher，它最初的设计目的是在校园里建立信息共享系统，让每个人都可以简单地发布自己的研究成果，并能共享别人发布的信息。由于这个系统设计得界面简单，一致性好，很快就在Internet 上流行起来。Gopher 最大的特点就是用户要作的只是从菜单中做出选择，而由Gopher 完成所需的操作，它可能要与另外一台计算机建立连接，或者要下载一个文件，或者打开一个Telnet 会话等，所有的过程用户都不必关心，也不必知道得到的数据是存放在哪台计算机中的。 广域信息服务 WAIS出现，WAIS 是 Internet 提供的快速信息查询服务工具，将相关的资料组织成一个可按关键词检索的数据库资料，提供给公众检索。 1991 年 8 月 万维网诞生。万维网的发明者蒂姆•；伯纳斯…李在 alt。hypertext讨论组上贴出了一份关于其研究项目万维网的帖子。该项目旨在构建链接系统，“允许建立指向任意地点任意信息的链接”，万维网开始名副其实。1992 年1992 年7 月 文字模式的网页浏览器 Lynx出现，Lynx是一种提供文字模式的浏览器，此程序支援 UNIX、LINUX、DOS 等多种操作系统。 1993 年1993 年2 月 Architext 发布。6 个斯坦福大学生的想通过分析字词关系，以对互联网上的大量信息作更有效的检索。到 1993年中，这已是一个完全投资项目 Architext，他们还发布了一个供webmasters 在自己网站上使用的搜索软件版本，后来被叫做Excite for Web Servers，也是后来的知名网站Excite 的前身。 1993 年3 月 美国总统Bill Clinton 发出了全球第一封电子邮件。 1993 年 6 月 WWWWanderer诞生。世界上第一个用于监测互联网发展规模的“机器人”程序是Matthew Gray 开发的World wide Web Wanderer，刚开始它只用来统计互联网上的服务器数量，后来则发展为能够检索网站域名。 1993 年 11 月 ALIWEB 诞生。与Wanderer 相对应，Martin Koster 于 1993 年 10 月创建了ALIWEB，它是 Archie的HTTP 版本。ALIWEB 不使用“机器人”程序，而是靠网站主动提交信息来建立自己的链接索引。 1993 年 12 月 随着互联网的迅速发展，使得检索所有新出现的网页变得越来越困难，因此，在Matthew Gray 的Wanderer 基础上，一些编程者将传统的“蜘蛛”程序工作原理作了些改进。其设想是，既然所有网页都可能有连向其他网站的链接，那么从跟踪一个网站的链接开始，就有可能检索整个互联网。到 1993年底，一些基于此原理的搜索引擎开始纷纷涌现，其中以 JumpStation 、TheWorld Wide WebWorm （Goto的前身，也就是今天 Overture ），和 Repository…Based Software Engineering（RBSE ） spider 最负盛名。然而JumpStation 和WWW Worm 只是以搜索工具在数据库中找到匹配信息的先后次序排列搜索结果，因此毫无信息关联度可言。而RBSE 是第一个在搜索结果排列中引入关键词串匹配程度概念的引擎。 1994 年1994 年 1 月 第一个既可搜索又可浏览的分类目录EINet Galaxy（Tradewave Galaxy）上线，除了网 站搜索，它还支持Gopher 和Telnet 搜索。 1994 年4 月 Yahoo斯坦福大学的两名博士生David Filo 和美籍华人杨致远（Gerry Yang）共同创办了超级目录索引Yahoo，并成功地使搜索引擎的概念深入人心。 互联网上第一个支持搜索文件全部文字的全文搜索引擎WebCrawler 是发布，在它之前，用户只能通过URL 和摘要搜索，摘要一般来自人工评论或程序自动取正文的前 100 个字。 1994 年7 月 Lycos，最早现代意义上的搜索引擎出现于 1994 年7 月。当时Michael Mauldin 将John Leavitt 的蜘蛛程序接入到其索引程序中，创建了大家现在熟知的Lycos，这是搜索引擎史上又一个重要的进步。当时Locys 数据量为 54，000，除了相关性排序外，还提供了前缀匹配和字符相近限制，第一个在搜索结果中使用了网页自动摘要。 1995 年1995 年2 月 Infoseek 的搜索引擎才与公众见面，并于1995 年 12 月与Netscape 签署战略性协议，使 它成为一个强势搜索引擎（注：2001年 2月，Infoseek停止了自己的搜索引擎，开始改用Overture 的搜索结果）。 1995 年4 月 Alexa 上线，并最终成为广受欢迎的网站排名系统。 1995 年 6 月 第一个元搜索引擎Metacrawle 出现。 1995 年9 月26 日 Inktomi 创立。 1995 年 10 月 Excite 网站正式公布。 1995 年 10 月LookSmart 上线，后来成为最有名的分类目录网站。 1995 年 12 月 DEC的AltaVista登场亮相，大量的创新功能使它迅速到达当时搜索引擎的顶峰。AltaVista 是第一个支持自然语言搜索的搜索引擎，是第一个实现高级搜索语法的搜索引擎，AltaVista 也声称是第一个支持用户自己向网页索引库提交或删除URL 的搜索引擎。 1995 年 6 月 Archive 1996 年1996 年 5 月20日 Inktomi公司成立，强大的 HotBot 出现在世人面前（Hotbot曾是随后几年最受欢迎的搜索引擎之一，后被Lycos 收购）。 1996 年Mamma Dogpile1997 年1997 年4 月 Ask Jeeves，也就是现在的ask 上线。 1997 年7 月 FAST Search 上线 1997 年GoTo 上线 1998 年1998 年 1 月 Openfind创立，其技术源自台湾中正大学吴升教授所领导的 GAIS实验室。Openfind 起先只做中文搜索引擎，曾经是最好的中文搜索引擎，鼎盛时期同时为三大著名门户新浪、奇摩、雅虎提供中文搜索引擎。 1998 年2 月 中国人自己的搜索引擎“搜狐”问世，“出门靠地图，上网找搜狐”开始了中国互联网的门户时代。 1998 年 5 月 Yahoo 搜索采用Inktomi 技术。 1998 年 6 月 开发时目录DMOZ 发布。 1998 年9 月27日 Google 诞生。 MSN Search 上线。 1998 年 10 月 Lycos 收购Wired/HotBot。 1999 年1999 年 1 月At Home 收购Excite。About 上线。 1999 年2 月 GO Network 上线。 1999 年 5 月 Fast（Alltheweb ）公司发布了自己的搜索引擎AllTheWeb 。 1999 年 6 月 CMGI 收购AltaVista 。 1999 年7 月 迪斯尼收购Infoseek。 1999 年9 月 FindWhat 上线。 2000 年2000 年 5 月 Terra 收购Lycos。2000 年 6 月 Vivísimo 上线。 Yahoo 搜索采用 Google 技术。 2000 年 10 月 Google 推出AdWords 广告服务。 2001 年2001 年4 月 Teoma 登场。Teoma 支持类似自动分类和提供专业链接目录的功能，同年9 月被提问式搜索引擎Ask Jeeves 收购。 2001 年 8 月 LookSmart 整合 Zeal并升级收费服务。非商业网站可通过 LookSmart旗下的Zeal 进行免费登录；商业网站则必须付费登录，还推出了“ExpressModify”服务，允许付费快速修改网站信息。 2001 年9 月 AskJeeves 收购Teoma WiseNut Wisenut由韩裔Yeogirl Yun 创立。2001 年春季发布Beta 版，2001 年9 月5日 发布正式版，2002 年4 月被分类目录提供商looksmart 收购。 2001 年9 月21日 搜狐公司在国内率先宣布对搜索引擎收费。但这项收费服务不是针对普通网民，而是对希望把自己的网站加入搜狐搜索引擎的企业提供分类搜索服务收费。 2001 年 10 月 GoTo 更名为Overture。 2002 年2002 年 1 月 Yahoo 收购StarMedia Network 旗下的巴西搜索引擎 Cade，并将其与Yahoo 搜索引擎整合。通过本次收购，Yahoo…Cade 将成为南美第三大网络媒体网站。 2002 年2 月 Google 推出了Adword Select 竞价排名广告业务，用户可针对目标关键词搜索结果页面中Adword 广告链接排名进行竞价，最低竞价为 5 美分，Google 竞价排名在考虑竞价高低同时还参考链接的点击率。 2 月28日起，百度竞价排名前3 位的网站开始出现在搜狐缺省搜索结果最前列。 2002 年3 月 12 日 新浪网搜索引擎中的网页搜索服务被百度停止。 2002 年 5 月 微软拒绝继续与RealNames 合作，导致后者宣布将在 6 月28日停止关键词搜索服务并宣布倒闭。 2002 年 12 月 Google 推出了商品购物搜索引擎Froogle。 2003 年2003 年3 月 Yahoo 收购Inktomi。 2003 年4 月 FindWhat 收购Espotting。 Google 收购Applied Semantics 。 Overture 收购AltaVista 和Fast/AlltheWeb。 4 月 15 日新浪正式宣布和中国搜索联盟结成战略合作伙伴，为企业提供搜索排名服务。 2003 年 6 月 Google 推出AdSense 服务。 2003 年 10 月 Yahoo 收购Overture。 2004 年2004 年2 月 Yahoo 整合其收购的多家搜索引擎技术，推出了YST 全文搜引擎技术，Yahoo 宣称其全文搜索引擎已索引了43 亿个网页文件。Yahoo 推出新的搜索引擎，意味着与Google 多年合作的终结。 Lycos 停止搜索服务。 2004 年3 月 AltaVista、AlltheWeb 切换为Yahoo搜索。 AskJeeves 收购Excite、iWon、My Way。 2004 年4 月 Google 推出Gmail 邮箱服务，全球率先推出 1G 免费邮箱。 2004 年 6 月 AOL 收购Advertising。 Yahoo 在中国推出独立域名的搜索引擎一搜Yisou。 Ask Jeeves收购Tukaroo Search。 百度Baidu获得新一轮投资，Google 成为其战略投资者。 2004 年 8 月 8 月3日，搜狐正式推出全新独立域名专业搜索网站“搜狗”（sogou ），力推用户互动式搜索功能。 Yahoo 推出Local Search Engine，提供本地搜索服务。 8 月 19 日 Google 首次公开发行股票 IPO，在美国NASDAQ 成功上市，Google的IPO 采用荷兰式拍卖的形式，上市后市值达到300 亿美元，超过众多老牌传统上市公司。 2004 年9 月 15 日 全球最大的在线购物网站Amazon 亚马逊发布了其Web 搜索服务工具的新版本A9，可从用户所选择的各种资源中组织有用信息，并能记住用户的个人搜索记录。 2004 年 11 月 MSN 发布新的搜索引擎。 Google 宣布收录网页超过 80 亿。 2005 年2005 年 1 月 Gigablast 宣布收录网页超过 10 亿。 AOL 发布新版的搜索引擎，并采取多项措施加强搜索引擎。 2005 年3 月 美国传媒大亨Barry Diller 的IAC 公司宣布收购Ask Jeeves，涉及金额达 19。5 亿美元， IAC拥有超过 40家不同网站，其中包括在线旅行站点 Expeidia、Hotels，社交网站 Match、Evite 及其它流行站点Ticketmaster、LendingTree 等。 2005 年4 月 4 月 12 日，搜狐以约1000 万美元全资收购国内一家名为Go2Map 的电子地图公司，搜狐在完成对Go2Map 的收购之后将把其资源整合进搜狐的搜索业务线当中。Go2Map 从2000年开始专注于网络地图搜索领域，Go2Map在该细分市场内已经做到了接近 90％的市场份额。 4 月 18 日，Yahoo 把旗下“Overture”更名为Yahoo Search Marketing，美国市场将率先实施更名计划，海外市场也将陆续更名，但日本和韩国将继续保持“Overture”品牌。调整之后。Overture 的搜索广告产品将以“Sponsored Search（赞助搜索）”为名，而本地付费搜索则称为“Loc