过度自信与规划谬误
目录 · 20
预计时间:40 分钟读 + 25 分钟做习题 = 65 分钟。
① 过度自信的三种形式:优于平均效应、校准过度、控制错觉;
② 规划谬误的机制(内部视角 vs 外部视角)及 Flyvbjerg 大型项目超支数据;
③ 参考类预测(reference class forecasting)等去偏方法,以及在投资和管理中的应用。
一、过度自信:行为决策学中最普遍的偏差
过度自信(Overconfidence)被许多研究者认为是所有认知偏差中最普遍、最具破坏性的。Kahneman 在《思考,快与慢》中称其为「最显著的认知偏差」。
过度自信有三种主要形式:
1. 优于平均效应(Better-than-Average Effect)
人倾向于认为自己在大多数积极特质上高于平均水平——但这在数学上不可能(大多数人不可能都高于平均)。
Svenson(1981)的经典研究:让司机评价自己的驾驶技术。
- 93% 的美国司机和 69% 的瑞典司机认为自己的驾驶技术高于中位数。
- 88% 的美国司机认为自己比平均水平更安全。
后续研究在大量领域重复了这一效应:
- 94% 的大学教授认为自己的教学能力高于平均(Cross, 1977)。
- 创业者认为自己的企业成功概率平均为 70%,而认为「同类企业」的成功概率只有 59%(Cooper, Woo & Dunkelberg, 1988)——实际上美国新企业 5 年存活率约 50%。
- 投资银行家、医生、律师、工程师都表现出优于平均效应。
2. 校准过度(Overprecision / Overconfidence in Calibration)
人对自己判断的准确性过于自信——给出的置信区间太窄,实际正确率远低于声称的信心水平。
典型实验:让人回答常识问题(如「尼罗河有多长?」),并给出 90% 置信区间(「我有 90% 把握答案在 X 到 Y 之间」)。
结果:正确答案落在 90% 置信区间内的比例通常只有 50%–60%,而不是 90%。即使是专家(医生、投资分析师、工程师)也表现出严重的校准过度。
Alpert & Raiffa(1982)的经典研究:哈佛商学院的学生回答常识问题并给出 98% 置信区间,结果实际正确率只有 60% 多——他们的「98% 确定」实际上只有 60% 准确。
3. 控制错觉(Illusion of Control)
人倾向于认为自己对实际上由运气决定的事件有控制力。
Langer(1975)的经典实验:
- 让被试买彩票。一组可以自己选号码,一组随机分配号码。
- 后来问被试愿意以多少钱卖掉彩票。自己选号码的组要价显著更高(平均 1.96)——因为「自己选」给了他们「我能控制结果」的错觉,即使彩票完全是随机的。
控制错觉在投资中表现为:频繁交易的投资者认为自己能「战胜市场」,但实际表现低于指数(见第 11 课行为金融学)。
二、规划谬误:为什么项目永远延期
Kahneman & Tversky(1979)首次提出规划谬误(Planning Fallacy):
人在预测项目完成时间时,倾向于过于乐观,即使知道过去的类似项目通常都延期了。
规划谬误的核心机制是内部视角(inside view)vs 外部视角(outside view):
- 内部视角:关注当前项目的具体细节、计划和步骤,想象「我们会怎么做」,然后基于这个想象预测完成时间。这会导致乐观偏差——人只考虑「一切按计划进行」的情况,忽视意外、延误、范围蔓延。
- 外部视角:不看当前项目的细节,而是问「同类项目通常花多长时间?」(参考类预测)。这能给出更准确的预测,但人天然倾向于内部视角——因为「我们的项目不一样」。
经典案例:悉尼歌剧院
悉尼歌剧院是规划谬误的标志性案例:
- 1957 年预计完工时间:1963 年,预算 700 万澳元。
- 实际完工时间:1973 年(延期 10 年),最终成本 1.02 亿澳元(超支约 14 倍)。
Flyvbjerg 的大型项目数据库
Bent Flyvbjerg 及其同事(2002, 2003)对全球数百个大型基础设施项目进行了系统研究,发现:
- 成本超支:90% 的项目超支。平均超支:铁路 44.7%、桥梁/隧道 33.8%、公路 20.4%。超支在 70 年的数据中没有下降趋势——人类没有从历史中学习。
- 需求低估:铁路项目的实际客流量平均比预测低 51.4%。公路项目的实际车流量平均比预测高或低约 20%(方差极大)。
- 时间延期:大型项目平均延期约 20%–30%。
Flyvbjerg 的结论:大型项目的成本和时间预测不是「有偏差的估计」,而是「系统性的低估」——在某些情况下甚至是故意的欺骗(战略误导),但大多数情况下是认知偏差导致的真诚乐观。
规划谬误的日常表现
- 写论文/报告:「我周末就能写完」→ 实际上花了两周。
- 装修:「两个月搞定」→ 实际上五个月。
- 软件开发:Hofstadter 定律——「项目实际花费的时间总是比预期长,即使你考虑了 Hofstadter 定律。」
- 个人目标:「我今年要读 50 本书」→ 实际上读了 12 本。
三、过度自信的深层原因
1. 自我服务归因(Self-Serving Attribution)
人倾向于把成功归因于自己的能力,把失败归因于外部因素。这导致:
- 成功 → 「我能力强」→ 更自信。
- 失败 → 「运气不好/别人的错」→ 自信不受损。
结果:自信只增不减,即使经历了多次失败。
2. 确认偏误的交互
过度自信的人只寻找支持自己判断的证据(确认偏误),忽视反面证据,因此对自己的判断越来越自信——即使判断是错的。两者形成正反馈循环。
3. 「我不知道我不知道」
过度自信最危险的形式是对自己无知的无知(unknown unknowns)。人不知道自己不知道什么,因此无法评估自己判断的不确定性范围。这就是为什么校准过度如此普遍——人给出的置信区间只覆盖了「已知的未知」,没有覆盖「未知的未知」。
四、去偏方法:什么有效
1. 参考类预测(Reference Class Forecasting)
Kahneman & Tversky 推荐,Flyvbjerg 实证验证:在预测项目时间和成本时,不要看当前项目的细节(内部视角),而是:
- 确定一个参考类(同类项目)。
- 收集参考类项目的实际完成时间和成本分布。
- 把当前项目放在这个分布中,取中位数或某个分位数作为预测。
Flyvbjerg 发现,使用参考类预测后,成本预测的准确率显著提高。英国财政部已将参考类预测纳入大型项目审批流程。
2. 强制考虑反面(Consider the Opposite)
在做判断前,强制列出「我的判断可能错的三个理由」。这能有效削弱校准过度(见第 3 课锚定效应的去偏手段,同一技术对多种偏差有效)。
3. 预验尸(Pre-mortem)
Gary Klein(2007)提出:在项目开始前,假设「项目已经惨败」,然后让团队倒推「为什么会失败」。这强制团队在过度自信最强烈的时刻思考失败的可能(详见第 15 课)。
4. 校准训练
通过反复反馈训练,可以部分改善校准——但效果有限,且需要即时、明确的反馈。天气预报员和职业赌徒是少数校准良好的群体,因为他们每天都在做可验证的预测并收到即时反馈。
基本无效的手段
- 告诉人「你过度自信了」——几乎无效,人会认为「别人过度自信,但我没有」(这本身就是过度自信的表现)。
- 提高赌注——金钱激励通常不能消除过度自信。
- 专业知识——专家在自己领域内同样过度自信,有时甚至更严重(因为「我是专家」的身份认同强化了自信)。
五、练习题
Svenson(1981)驾驶能力研究中,多少比例的美国司机认为自己高于中位数?
Alpert & Raiffa(1982)让哈佛学生给出 98% 置信区间,实际正确率约为?
Langer(1975)彩票实验中,自己选号码的组 vs 随机分配号码的组,卖价差异说明?
规划谬误的核心机制是?
Flyvbjerg 对全球大型基础设施项目的研究发现?
「参考类预测」的核心做法是?
Cooper, Woo & Dunkelberg(1988)发现创业者认为自己企业成功概率约 70%,而认为同类企业成功概率约 59%——这说明了什么?
来源证据
- Svenson, O. (1981). Are we all less risky and more skillful than our fellow drivers? Acta Psychologica, 47(2), 143–148.
- Cross, P. (1977). Not can but will college teaching be improved? New Directions for Higher Education, 17, 1–15.
- Cooper, A. C., Woo, C. Y., & Dunkelberg, W. C. (1988). Entrepreneurs’ perceived chances for success. Journal of Business Venturing, 3(2), 97–108.
- Alpert, M., & Raiffa, H. (1982). A progress report on the training of probability assessors. In D. Kahneman, P. Slovic, & A. Tversky (Eds.), Judgment under Uncertainty: Heuristics and Biases (pp. 294–305). Cambridge University Press.
- Langer, E. J. (1975). The illusion of control. Journal of Personality and Social Psychology, 32(2), 311–328.
- Kahneman, D., & Tversky, A. (1979). Intuitive prediction: Biases and corrective procedures. TIMS Studies in Management Science, 12, 313–327.
- Flyvbjerg, B., Holm, M. S., & Buhl, S. (2002). Underestimating costs in public works projects: Error or lie? Journal of the American Planning Association, 68(3), 279–295.
- Flyvbjerg, B., Skamris Holm, M. K., & Buhl, S. L. (2003). How common and how large are cost overruns in transport infrastructure projects? Transport Reviews, 23(1), 71–88.
- Klein, G. (2007). Performing a project premortem. Harvard Business Review, 85(9), 18–19.
- Moore, D. A., & Healy, P. J. (2008). The trouble with overconfidence. Psychological Review, 115(2), 502–517.
- Hofstadter, D. R. (1979). Gödel, Escher, Bach: An Eternal Golden Braid. Basic Books.(Hofstadter 定律的出处)