致知录
第 XXXIV 卷 · 第 97 篇 · Concept Fables · 1970.01.01

只晒中奖的彩票

概念寓言 · 1970.01.01 · 1 分钟阅读 · 301 字
目录 · 2
他试了一百回,只把中的那张拿出来给人看。

镇上来了个卖咳药的老周,背篓里装满小纸包。他挨家试药,治过一百个本就会自愈的咳嗽,其中有七八人碰巧三天就好了。老周把这几包药高高举给街坊看:“灵得很!”剩下九十几个没动静的纸包,他悄悄塞回篓底。路过的人只瞧见那几张“中奖的彩票”,纷纷掏钱。没人知道,那点好转和药一点关系都没有,全是身子自己好的。

揭示

这则故事想说的概念是:P值操纵(P-hacking)。

英文定义(P-hacking):The practice of repeatedly analyzing data or trying many tests until a statistically significant result appears, inflating false positives.

它属于哪个领域:统计学 / 科研方法(Statistics / Research Methods)

研究者若不断换分组、换指标直到 p 值显著,得到的“显著”多为假阳性。p-hacking 是 reproducibility 危机的元凶之一。

故事里的隐喻对应什么

  • 老周只举好的纸包 → 多次检验直至显著
  • 篓底收起的九十余包 → 未报告的阴性结果
  • 碰巧好转的七八人 → 随机波动被误读为效应
  • 街坊掏钱信了灵 → 发表偏倚误导结论