谷歌

群体的智慧

谷歌是一种搜索引擎,其崛起展现了如何将集体判断组织成实用工具。它的网页排序算法把网页之间的链接视为投票,并根据投票页面的重要程度为这些投票赋予不同权重。按照本书的说法,这使数十亿个由各自管理的网页能够共同提供快速且通常有用的排序——这是一种集体智慧,不是通过指定一位无所不知的裁判来建立,而是通过汇总分散的信号形成。

作为搜索引擎的崛起

谷歌于1998年创立;当时雅虎似乎主宰着互联网搜索,而如果雅虎失势,阿尔塔维斯塔或莱克斯看起来可能成为替代者。几年之内,谷歌便成为普通互联网用户默认使用的搜索引擎,因为它能快速而有效地找到相关网页。这一变化并不只是检索到更多材料。谷歌的独特成就在于让万维网庞大而分散的结构帮助识别哪些网页对特定搜索最有用。

本书通过一系列搜索具体展现了这种速度。为了找到比尔·默里的电影《疯狂高尔夫》独白全文,作者输入了“为我而战”和“贡加”这两个词;在695条结果中,宾夕法尼亚州立大学足球俱乐部的页面收录了整段独白,该页面由守门员戴维·费斯特发布。搜索“‘股市’挑战者号反应”,得到2370个网页,显示了一篇关于穆赫林论文的文章,也找到了穆赫林本人的网站,尽管搜索词中没有他的名字。其他搜索则找到了所需的雷蒙斯乐队歌词。所有搜索加起来约花了一分半钟,而每条结果都在不到一秒的时间内呈现。

这些例子旨在说明,谷歌搜索的并非一个小型、经过筛选的目录。它检索数十亿个网页,并一再把用户需要的网页排在靠前位置。搜索结果带来的熟悉便利,掩盖了一项艰巨的集体任务——从海量材料中挑出少数相关网页,却无需先让人类专家逐一检查全部内容。

网页排序算法与万维网的投票

本书指出,网页排序算法是谷歌系统的核心,同时提到该公司对自己的技术细节守口如瓶。该算法最初由谷歌创办者谢尔盖·布林和劳伦斯·佩奇在1998年的论文《大型超文本网页搜索引擎的剖析》中提出。网页排序算法不把每个网页视为孤立的文档,而是利用万维网的链接结构作为组织系统。

网页甲指向网页乙的链接,算作网页甲为网页乙投的一票。但该算法不只是计算链接数量——它会给来自自身也被视为重要网页的投票赋予更大权重。因此,一个网页的排名既取决于有多少其他网页指向它,也取决于这些网页的地位。按照本书的表述,所得结果是一种加权平均,而不是由众人估算一头牛的体重所代表的简单平均。

这种方法把普通搜索转变为一种分布式决策。得票最有力的网页通常会排在前面;本书指出,排名第一的结果,或紧随其后的结果,往往就是包含最有用信息的网页。书中引用的一种描述称,一次搜索可以检索三十亿个网页;排名将其链接中所体现的判断压缩成几乎即时呈现的结果。万维网的结构由此成为一种手段,能够大规模呈现分散的评估。

共和国,而非完美民主

本书强调,网页排序算法并未赋予每个网页同等影响力。被许多其他网页链接的网页权重更大,而本已重要的网页在为另一个网页投票时也能产生更大影响。因此,谷歌被描述为一个共和国,而非完美民主——最终排名反映的是不平等的影响力,而不是简单的一页一票。

按照本书的说法,这种不平等并未将群体排除在决策之外。具有影响力的网页之所以拥有地位,是因为较小的网页链接到了它们。如果较小的网站不断赋予不相关网页过多权威,搜索结果就无法继续保持准确。因此,该系统的核心主张是有条件的——排名靠前的结果若要有用,取决于整个网络中的贡献质量。群体通过加权结构发挥作用,而这种结构只有在底层链接模式承载有用信息时才能奏效。

集体智慧及其局限

谷歌是本书更广泛论点的一个例子——个人不必各自都是专家,他们的综合判断也能发挥价值。人类决策者在信息、预见能力以及计算的意愿或能力方面都有限;即便如此,只要条件合适,汇总仍能产生出色的集体结果。谷歌将这一理念应用于信息检索——由网页运营者分别建立的链接,各自体现了对另一网页的局部判断,这些判断共同构成全系统的排名。

这一例子也阐明了分权的一般难题。分散的参与者能够独立获得专门知识,但有价值的信息可能无法传到其发源地以外的系统部分。本书将单纯的分权与汇总区分开来——没有汇总判断的方式,局部知识就会继续处于零散状态。网页排序算法被视为一种将这类局部信号转化为整体集体结果的方式,使从未接触过排名背后各项个别判断的人也能从中受益。

本书并未把这一系统当作每个群体或每个市场都将明智的证明。它的表现取决于贡献如何汇总,也取决于链接能否为排名提供可靠依据。这个例子的意义就在于这种区分——集体智慧并非自动形成,也不要求意见一致或影响力平等。谷歌的搜索结果体现了一种经过设计的方法,用来汇总不平等、分散的判断;它也展示了这种方法如何在一次搜索所需的时间内,让庞大的网络发挥作用。