小样本肾癌县分析
思考,快与慢小样本肾癌县分析考察了美国3141个县中肾癌发病率呈现的一种引人注目的模式。报告发病率最低的县大多是农村县、人口稀少,并集中在中西部、南部和西部传统上支持共和党的州。同样的描述也适用于报告发病率最高的县。矛盾正是关键所在——癌症表面上的地理分布会诱使人们寻找解释,但起决定作用的变量是农村样本规模较小。
表面上的模式
分析从一个似乎要求寻找原因的事实开始。发病率低的县看起来都是农村县且人口稀少,因此观察者可能把它们有利的数字归因于清洁的农村生活、较少的空气和水污染,或能够获得不含添加剂的新鲜食物。当注意力转向发病率高的县时,同样的农村环境又可以被用来支持相反的说法——贫困、医疗条件不足、高脂饮食、酒精和烟草。由于农村生活方式不可能同时解释异常低和异常高的癌症发病率,这两组相对的模式揭示了把描述性关联当作因果解释的危险。
地理和政治细节是干扰因素,而不是解释。支持共和党并不能保护一个县免患肾癌,农村生活也不可能同时既是一种维护健康的美德,又是一种导致疾病的匮乏。各县共有的不是某种单一的因果环境,而是人口规模较小;这使它们观察到的发病率特别容易受到随机波动的影响。
抽样与极端结果
通过一个装有数量相等的红色和白色弹珠的巨大棺材,统计机制会变得更加清楚。如果每次试验抽取4颗弹珠,并在每次试验后放回,那么抽到两红两白的结果,大约是抽到全红或全白结果的6倍。因此,即使没有任何力量使棺材偏向某种颜色,极端结果在小样本中仍然会在数学上更加常见。这种规律属于抽样过程,而不属于各次抽取之间某种隐藏的因果差异。
杰克和吉尔的比较更清楚地说明了这一点。杰克每次试验抽取4颗弹珠,而吉尔抽取7颗。如果两人都记录下同质样本,即全白或全红,杰克得到这类极端结果的频率会更高——约为12.5%,而吉尔为1.56%,相差8倍。这种差异不是由努力、意图或作用于弹珠的某种机制造成的,而是样本规模在数学上的结果。
肾癌县也可以用同样的方式理解。设想把美国人口看作一个巨大的棺材,其中一些人被标记为KC,并设想通过抽取样本来组成各县。农村县获得的样本小于人口密集县。小样本更可能产生异常高或异常低的标记个体比例,因此,最极端的癌症发病率会不成比例地出现在人口稀少的县。统计过程制造了农村模式的表象,却不要求农村条件导致癌症或产生免疫力。
心智为何会编造原因
这项分析还说明了系统1与系统2之间的分工。系统2可能会有意检索记忆、提出假设,并认识到这种模式不能仅仅用农村美德来解释。然而,系统1始终处于活动状态,不断提供联想并自动寻找因果联系。当面对高或低癌症发病率时,心智会假定该县必定因为某种原因而不同于其他县,并开始构造一个解释这种差异的故事。
这种反射尤其强大,因为因果解释比统计解释更令人满足。锤子敲击鸡蛋提供了一种直观机制,使破碎的蛋壳看起来能够得到解释。来自棺材的重复抽样会产生规则的分布,却没有提供同样具有力量与后果的故事。心智很容易理解原因,却不太适应那些会改变概率、却不导致个体结果的事实。因此,肾癌模式成为一项检验——统计推理能否抵抗一个富有吸引力的叙事。
重复、回归与预测
表面上的县域差异并不是这些县的稳定属性。如果第二年重复分析,小县仍会再次在最极端的结果中占据过高比例,但第一年发病率高的县不一定在下一年仍然很高。它们先前的数字是研究方法——在此例中是不等样本规模——产生的产物,而不是其潜在癌症风险确实不同的可靠证据。
这种不稳定性与回归平均值有关。极端观察值通常同时包含真实成分和偶然成分;当重复观察时,偶然成分不太可能以同样的强度再次出现。同样的逻辑也出现在其他例子中——第一天异常好的高尔夫成绩反映了天赋和好运,而异常差的成绩反映了较弱的表现和坏运气,因此对第二天的最佳预测会向平均水平移动,而不是简单重复第一天的结果。在县域分析中,人口少并不会导致癌症或阻止癌症发生。它只是使观察到的发病率能够偏离较大人口总体的平均值更远。
因此,这一教训既关乎预测,也关乎描述。若不考虑样本规模和不确定性,就不应把一个县的极端发病率视为其未来发病率的可靠预测。大样本值得更多信任,因为其结果波动较小;小样本需要谨慎,恰恰是因为它们的数字看起来最为惊人。
与更广泛统计推理的关系
肾癌分析属于纠正直觉判断这一更大领域。贝叶斯推理要求把先验信念或基准率与个案证据的诊断性结合起来,而不是让一个生动的描述取代它们。在汤姆·W问题中,一项在计算机科学专业学生中出现概率高出4倍的描述,会把3%的基准率改变为11%,而不是改变为刻板印象所暗示的直觉确定性。在出租车问题中,当有具体证词可用时,统计基准率往往被赋予过低权重;相反,因果基准率被视为有关个案如何发生的信息。县域数字显示了相关的错误——人们把一个观察到的极端结果误认为潜在因果差异的证据,而它可能只不过是抽样的后果。
同样的纠正也适用于相关性和表面上的社会解释。高智力女性往往会与智力低于自己的男性结婚,这一事实听起来可能是在说明动机或偏好,但如果假定男女平均智力没有差异,它在数学上源于配偶智力分数之间不完全的相关性。与肾癌县一样,一个令人感兴趣且似乎具有解释力的模式,可能只是统计结构不可避免的结果。
这项分析的决定性意义在于它颠倒了注意力的方向。问题不是哪种农村习惯解释了低癌症发病率,也不是哪种农村困境解释了高癌症发病率。问题是,观察到的极端结果是否包含足够信息,足以支持任何这类故事。一旦人口规模变得清晰,谜团便基本消失——原来看起来是关于各县的事实,变成了关于样本的事实;原来看起来是因果关系的东西,变成了小数定律信念造成的产物。