专家预测还不如扔硬币?这个研究结果让人睡不着觉

整理:Maple

摘要:一项长达20年、追踪284位顶级专家、收集近28000条预测记录的研究显示,专家对政治、经济、国际事务的预测准确率整体和扔硬币差不多,甚至不如简单统计模型。这个研究颠覆了”专家最懂趋势”的常识直觉。

扔硬币预测

你有没有发现一个奇怪的现象?

每次大选前,电视上各种政治专家、经济学家口若悬河地预测谁能当选、股市走向如何、房价涨还是跌。他们西装革挺、引经据典,我们听得频频点头,觉得”人家研究了一辈子,肯定比我们强”。

结果呢?

预测准确率:和扔硬币差不多。

这个研究叫《Expert Political Judgment》,作者是宾夕法尼亚大学的Philip Tetlock教授。研究设计很简单,但很”笨”:

• 招募了284位专家(政治学家、经济学家、情报分析师、外交官等)

• 让他们对各种政治、经济、国际事件做预测

• 总共收集了近28,000条预测记录

• 时间跨度:约20年(1980年代到2000年代初)

这些专家可不是普通人,都是各自领域的顶尖人物。他们预测的事情包括:某个国家会不会爆发内战、经济危机会不会来临、核扩散趋势如何、哪个政党会赢得选举。


01 四个字:不如扔硬币

1. 总体准确率接近随机水平

对于三选一的问题,随机猜测准确率约33%。专家们的表现仅”略微好一点”,有时甚至更差。

2. 简单算法反而更准

Tetlock比较了专家和”过去趋势继续”这种机械模型。结果让人无语:简单外推算法显著超越了专家判断。

3. 越自信越不准

专家们对自己”最确定”的预测,实际发生率远低于他们宣称的概率。自称100%会发生的事件,实际只发生了约80%。

4. 复杂模型反而更差

你以为加入更多变量的高级统计模型能提高准确率?错。越复杂的模型,在某些测试中表现越差。


02 刺猬与狐狸

Tetlock用了Isaiah Berlin的一个著名比喻,把专家分成两类:

刺猬型(Hedgehogs)

• 相信”一招鲜,吃遍天”

• 用一个大理论解释一切

• 特点:爱说”历史证明……” “我的模型显示……”

• 预测准确率:最低

狐狸型(Foxes)

• 思维开放,整合多种观点

• 愿意更新信念,承认不确定性

• 特点:经常说”不一定……也可能……”

• 预测准确率:显著更高

简单说:越自信的专家越不准,越开放的心态越靠谱。


03 普通人的逆袭

故事还没完。

2011年,美国情报研究计划(IARPA)搞了一个预测比赛,叫”Good Judgment Project”。参赛者包括普通志愿者、情报机构专业分析师、学术专家。

结果再次颠覆认知:

普通志愿者中的”超级预测者”(Superforecasters),预测准确率大幅超越专业情报分析师和学术专家。

这些超级预测者有什么特点?

• 不是领域专家

• 但具备特定的思维习惯

• 勤于更新信念

• 用贝叶斯思维思考

• 避免叙事陷阱

专家思维

换句话说:会思考的人,比有知识的人更会预测。


04 为什么我们总觉得专家很准?

说了这么多,你可能还是有点不服气——”我明明记得很多专家预测对了啊?”

这就涉及到几个心理学陷阱:

后见之明偏差

事情发生后,我们容易觉得”早就该知道”。经济学家预测准了一次,我们就忘了他们预测错了的一百次。

媒体选择效应

大胆、鲜明、故事性强的预测(刺猬型擅长)更容易上新闻。谨慎、说”我不确定”的狐狸型,往往没人报道。

激励扭曲

专家靠预测出名,就不会轻易承认自己错了。他们更倾向于维持一个”敢说”的形象。

复杂系统特性

政治、经济、国际关系是高度非线性系统。短期内有规律,中长期预测本质上像天气预报——数据再多,也难以精确。


05 这对你意味着什么?

关于政策制定

很多重大政策依赖专家预测。但Tetlock式研究提醒我们:政策效果充满不确定性,”专家共识”可能出错。更好的做法是多元参考、概率思维、情景规划。

关于媒体和社交网络

看到专家在电视上自信预测选举、股市时,别急着转发。先查查这个人过往预测记录如何,是刺猬型还是狐狸型?

关于你的人生决策

投资、职业规划、人生选择……别把”专家建议”当成铁律。多问几个问题:这个预测的历史准确率是多少?置信区间有多大?备选情景是什么?


06 核心启示

Tetlock的研究不是要我们完全否定专家,而是告诉我们一个重要道理:

“如何思考”比”知道多少”更重要。

超级预测者证明:通过训练分解问题、寻求反证、及时更新、团队讨论等技巧,普通人也能大幅提高预测能力。

这个研究的最大冲击在于:

人类对复杂未来的掌控力,远比我们自以为的弱。

面对不确定性,保持谦逊、多元视角和实证心态,比盲目相信权威更可靠。


如果觉得有用,点个赞

转发给朋友看看

关注我,每天更新热点资讯

本文由 Maple 整理,参考猪脚饭实验室及Philip Tetlock《Expert Political Judgment》

未经授权禁止转载

Leave a Comment

Your email address will not be published. Required fields are marked *

Scroll to Top