盖茨基金会
思考,快与慢盖茨基金会在书中作为一个强大的机构性行动者出现。它试图找出教育成功的秘诀,却暴露了从极端的小样本中得出因果结论的危险。它的干预使对统计直觉的讨论产生了具体的公共后果——学校数据中一个颇具吸引力的模式促成了大规模慈善投资,尽管其基础比较并未证明小型学校更好。
小型学校投资
该基金会投入约17亿美元,用于跟进对最成功学校特征的研究。这项研究计划始于一种常见的机构抱负——研究那些表现得异常出色的组织,发现它们的独特之处,并在其他地方复制这些特征。在对宾夕法尼亚州1662所学校开展的一项调查中,表现最好的50所学校里有6所是小型学校,表面看来其占比超出预期四倍。
这一结果促使盖茨基金会支持创建小型学校,其中包括把大型学校划分为较小单位的工作。这项倡议并未停留在孤立状态。至少有六家知名机构加入了这项工作,其中包括安嫩伯格基金会和皮尤慈善信托基金;美国教育部的“小型学习社区计划”也参与其中。这一回应的规模及其机构覆盖范围表明,一个统计模式如何能够迅速从研究发现转变为行政与慈善项目。
统计错误
小型学校的结论在直觉上颇具说服力,因为它立即引出了一个因果故事。较小的学校似乎能够给予学生更多个别关注和鼓励,而这很可能带来更高的学业成就。但这种因果解释建立在对数据的错误解读之上。如果研究者既考察最差的学校,也考察最好的学校,就会发现,差学校往往也比平均水平更小。
关键区别不在于小型学校更优秀,而在于小型学校的结果变异更大。它们在异常成功和异常失败的学校中都占比过高,因为较小的样本和较小的单位会产生更极端的结果。平均而言,证据并未显示小型学校更好;如果一定要说有什么倾向,较大的学校往往会产生更好的结果,尤其是在高年级阶段,因为更广泛的课程选择很有价值。
因此,这一事件说明了小数定律信念——人们倾向于期待小样本类似于总体,并把显著偏离视为稳定的潜在原因的证据。该基金会的投资把高绩效学校中的异常结果转化为一般性的机构处方,却没有充分追问同一特征是否既存在于失败之中,也存在于成功之中。
与证据和预测的关系
本书把这一事件置于一个更广泛的论述中——人们和组织往往偏爱引人入胜的信息内容,而不是有关其可靠性的信息。关于成功学校的生动发现,比“小单位中极端结果很常见”这一不那么戏剧性的统计事实更容易记忆和解释。由此形成的故事比数据本身所能支持的更为连贯,而这种连贯性又使干预显得更加可信。
这一模式与本书对贝叶斯推理的处理相呼应。相关判断应当把先验信息或基准率信息,与特定案例证据的诊断力量结合起来,而不应让一个有吸引力的描述压倒总体基线。同样的纪律也适用于机构决策——一所成功的学校并不会自动成为导致成功的原因模型,一个被观察到的特征也不一定适合作为有效的干预目标。
这一教训还与外部视角和参考类预测相联系。在投入资源进行改革之前,决策者应当考察由适当的可比案例构成的类别,包括有利和不利的结果,并确定拟议特征是否能够在整个结果分布中预测成效。小型学校倡议表明,当关于令人印象深刻案例的内部视角取代有关完整总体的分布信息时,会发生什么。
机构意义
盖茨基金会在书中的重要性,并不在于其动机受到质疑,而在于它的资源放大了一个常见的认知错误。慈善资本、合作机构和政府项目共同强化了最初的解释,使一个脆弱的推断获得了共识的外观。这一事件表明,统计直觉并不只是个人判断中的私人弱点;它能够塑造大规模教育政策,并决定数十亿美元如何被分配。
因此,它在叙事中的位置具有警示意味。该基金会的经历把心理学研究与依据证据采取行动的机构所承担的实际责任联系起来。颇具吸引力的模式在转化为项目之前,需要接受基准率、变异性和失败案例的检验。缺少这种审查时,一个组织可能会把分布中引人注目的赢家误认为是制造赢家的可靠公式。