知识卡片登录注册
观点入门统计直觉与概率判断启发法与判断偏差

对研究结果的过度信任

也叫:过度信任研究结论

系统1不善质疑,易对来路不明的研究结论照单全收。

核心讲解

作者指出,系统1并不善于质疑,它抑制不明确的信息,不由自主地把信息处理得尽可能连贯;除非信息被立刻否定,否则它引发的联想就会扩散,仿佛信息千真万确。系统2可以质疑,因为能同时包含不相容的多种可能性,但保持质疑比不知不觉相信更困难。对研究结果的过度信任还体现在样本上:许多研究人员过于相信通过有限几次观察得出的结果,这与光环效应紧密相连——我们常觉得对某人很熟悉很了解,其实知之甚少。系统1在了解事实之前就根据零散证据拼凑饱满形象。作者与阿莫斯的调查显示,即使资深研究者(包括数学心理学家)在小样本问题上也会犯错:他们选择的样本通常过小,有50%的风险无法证实正确的假设。作者建议,对统计直觉应抱怀疑,只要条件允许,就用计算方法确定样本规模,而不是依靠直觉印象。

费曼版:用大白话再讲一遍

一条消息只要没当场被反驳,大脑就默认它是真的,还会自动给它添油加醋。对“研究结论”也一样:看到一个数字、一个样本得出的结论,很少有人先问“样本多大?谁做的?怎么做的?”——先信了再说。系统2这位质检员,多数时候并不上班。

要点

  • 系统1不善质疑,默认把连贯信息当真实。
  • 人们更关注信息内容,较少关注信息可信度。
  • 连资深研究者也过度相信小样本研究结论。
  • 对统计直觉应抱怀疑,用计算方法确定样本规模。

常见误区

  • 以为“研究结论”天然可信,样本大小和研究方法决定其可信度。
  • 以为专家不会轻信小样本,调查显示资深研究者同样犯错。
  • 以为质疑是常态,保持质疑比相信更费力。

编者注

  • 观点“对研究结果过度信任、系统1不善质疑”是作者观点,建立在第十章实验与观察之上。

多方视角

作者的看法

系统1不善质疑,人们普遍过度信任小样本研究结论,包括资深研究者。

不同的看法

  • 科学界对“研究结果可信度”的担忧更多指向发表偏误与可重复性危机,与作者强调的个体心理机制互补。

支持作者的理由

  • 数学心理学家在小样本问题上同样犯错,说明这不是知识问题而是直觉问题。
  • 人们重内容轻来源,眼见即为事实原则贯穿全书证据。

留给你的问题

你最近相信的一条“研究结论”,你查过它的样本量和研究方法吗?

邀请你加入学习

今天的免费浏览次数用完了,加入学习后可以看全部内容。

想真正学会?

加入学习后可以看全部卡片,按路线学习,每张卡都有自测题,系统按遗忘规律安排复习。

一起看