图片

为什么天气预报说"70%",反而比专家说"肯定"更专业?

天气预报员说:

明天有70%的概率下雨。

第二天没有下雨。

这次预报错了吗?

很多人的第一反应是:当然错了。既然没有下雨,为什么还说有70%的概率?

这是对概率最常见的误解。

70%的概率,从来不意味着明天一定下雨。它真正表达的是:在所有条件相似、被预测为70%降雨概率的日子里,长期大约有70%的日子会下雨,另外30%的日子不会下雨。

这不是夸张。你可以去查历史记录:经过专业训练的气象预报员,在重复出现的降雨预测中,往往能表现出较好的校准。

他们说70%的那些日子,实际降雨比例接近70%;说30%的那些日子,实际降雨比例也大致接近30%。

他们每天都会遇到预测没有实现的情况。他们真正擅长的,是知道自己的判断究竟有多可靠。

说70%,就承担70%的统计含义;说90%,在长期记录中,这类判断应当极少出错。

现在再看另一群人。

从1980年代中期开始,心理学家兼政治学家菲利普·泰特洛克持续追踪政治和经济领域专家的预测。

这项研究后来总结在《专家政治判断》中。研究涉及284名专家,累计收集了超过8.2万次预测。

这些人并不是外行。

他们熟悉国际政治、经济政策和地区局势,有些人还长期在媒体上分析未来走向。

但研究发现,专业知识并没有自动转化为稳定的预测能力。一些理论立场单一、表达更加绝对、在媒体上更受欢迎的专家,信心往往更高,预测表现却未必更好。

这里真正的问题,不是专家没有知识,而是他们可能知道很多,却不知道自己的知识究竟能支持多大的确定性。

两组人的差异,不在智力,而在判断环境。

校准不是天生的能力,而是环境允许你反复练习的结果。天气预报员所处的环境具备五个条件:能不能反复作出同类预测,有没有明确的结果反馈,有没有可参考的历史基准率,预测结果能不能被清楚判定,判断者会不会保留长期记录。天气预报员每天都在经历"预测—结果—复盘"的循环。

许多政治、商业和战略判断却不是这样。预测失败后,判断者可以重新解释:"当时情况突然变化了。""如果不是那个意外,我本来是对的。""虽然结果没有发生,但我的逻辑没有问题。"

一次判断很容易被解释。只有把大量判断放在一起,你才会发现自己说"很可能"的时候,到底有多经常真的发生。

这种对"我有多大把握"的检验,就是置信度校准。

你说"我很确定",是在报告证据,还是在报告感觉?

置信度校准的定义很直接:

当你说自己有X%的把握时,在大量同类判断中,实际正确或实际发生的比例,应当接近X%。

大多数人说"我很确定"时,并没有真的在报告概率。

他们表达的是一种内在感受:这个解释听起来很顺,我能迅速想出很多支持理由,我暂时想不到有力的反例。

这些感觉会让人产生强烈的确信。但确信感不等于预测力。你能想出五个支持理由,不代表这些理由彼此独立;一个故事听起来完整,也不代表它覆盖了所有可能性;你没有想到反例,也不代表反例不存在。

心理学家利希滕斯坦和菲施霍夫在1970年代做过一系列实验:让人们回答常识问题并对每个答案给出把握程度。结果反复出现一个规律——当人们表示自己有90%的把握时,实际正确率往往只有70%至75%左右。

人们并不是故意撒谎,他们真的感觉自己有90%的把握。问题在于,他们把内心确信的强度,误当成了判断正确的概率。

假设你连续作出了100个判断,每个判断都给出80%的置信度。

如果最终大约有80个判断正确,说明你的80%比较可信。

如果只有55个判断正确,说明你的信心高于实际表现,你存在过度自信。

如果有95个判断正确,说明你的信心低于实际表现,你可能过于保守。

置信度校准检查的是你的信心刻度,长期是否与真实表现相匹配,而不是某一次判断对不对。

可以把人的信心想象成一支温度计。

温度计显示30摄氏度,真实温度也接近30摄氏度,它就是准确的。

如果它经常在20摄氏度时显示30摄氏度,这支温度计就发生了系统偏移。

人的信心也一样。

你的确信感,有没有经过现实校准?这才是关键。

所以,不要只问"我现在有多确定?"继续追问:"我过去像现在这么确定时,有多经常是对的?"

概率不能只是一种感觉,它必须接受长期记录的检验。

一次猜对或猜错,为什么都不能证明你的信心合理?

假设天气预报员说:

明天有70%的概率下雨。

第二天没有下雨。

这并不证明他的概率估计错误。

因为70%本来就允许30%的情况不发生。

同样,一个人说某个项目有80%的概率成功,项目最后失败,也不能仅凭这一次结果断定他的80%毫无根据。这次失败可能属于剩下的20%。

反过来也一样。一个人说某项目只有20%的成功概率,项目最后却成功了,也不能据此证明他当初应该给出90%的把握。低概率事件本来就可能发生。

概率判断不能只看单次输赢。

真正应该检查的是:在大量被判断为80%的项目中,最终是否大约有80%成功。

这条原则同时纠正了两种常见错误。

过度自信的人会在失败后说这只是一次意外,我的判断没有问题。过度保守的人会在一次失败后说看吧,我果然不该给那么高的概率。

两种反应都跳得太快。正确的做法是把这次结果放进长期记录,等待更多同类判断形成可比较的样本。

挑战者号航天飞机事故,就是一个经常被误解的例子。

切尔诺贝利核事故和挑战者号航天飞机爆炸,都是极端确定性酿成灾难的典型案例。切尔诺贝利核事故前两个月,乌克兰能源与电气大臣说:"这里发生核泄漏的概率是一万年都难遇的。"结果核泄漏了,31人当场死亡,后续影响数十万人。1986年,挑战者号在发射后不久爆炸,7名宇航员遇难。

这两个事故经常被用来证明:既然事故发生了,此前的极低风险估计一定是错的。

但事故发生本身,不等于低概率估计一定错误。

哪怕一个事件只有万分之一的概率,它仍然可能在下一次发生。

挑战者号真正暴露的问题,是同一机构内部对风险的估计相差了几个数量级。

管理层估计的事故概率低至十万分之一,部分工程师的估计却高达百分之一——相差三个数量级。

更严重的是,在发射前,工程师已经对低温条件下的密封圈性能提出担忧。

这意味着,问题不只是一次不幸的随机结果,而是管理层给出的确定程度,没有充分反映内部存在的重大分歧、工程师已经提出的反对证据、历史数据的有限性,以及复杂系统中尚未被理解的风险。

所以,挑战者号真正提醒我们的是:当一个极端概率远低于内部专业人员的估计,又无法说明数字从何而来时,极端确定性本身就是一种风险。

一个人当然可以给出很低的事故概率。但他必须说明这个数字来自什么数据、使用了什么参考类别、哪些风险已经被计入、哪些风险尚不清楚、什么新证据会迫使他提高风险估计。

如果这些问题都回答不了,"十万分之一"就可能不是计算结果,只是希望被包装成了数字。

为什么要把所有"70%把握"的判断放在一起看?

置信度校准不能通过一次预测被检验。

它只能在一组判断中被检验。

假设你今天判断这个候选人有70%的概率能够胜任岗位。

三个月后,他表现很好。

这不能证明你的70%是准确的。

因为70%、90%甚至50%的判断,都有可能在这一次得到正确结果。

真正有意义的做法,是把你过去所有给出70%把握的招聘判断放在一起。

然后检查最终有多少候选人真的胜任,这些结果是否接近70%,你的70%在招聘、项目、投资等不同领域是否同样可靠,你在哪些问题上容易高估、在哪些问题上容易低估。

这就是置信度校准必须依赖分组统计的原因。

你需要把不同判断按照概率区间归类——50%至59%、60%至69%、70%至79%、80%至89%、90%以上——然后观察每个区间的实际发生比例。

例如,你所有80%至89%的判断中,最终只有62%实现。

这说明什么?你心里的80%,在现实中可能只值60%左右。

你的信心刻度偏高了。

反过来,如果你所有60%左右的判断中,最终有80%实现,说明你在这一档位上可能过于保守。

你的信心刻度偏低了。

只有把同类判断放在一起,个人的系统偏差才会出现。

否则,我们只会记住那些最戏剧化的结果:"我早就说过这个项目会失败。""我第一眼就觉得这个人不靠谱。""当时所有人都不信,只有我判断对了。"

人很擅长记住自己说对的时刻,也很擅长重新解释自己说错的时刻。记忆不是校准工具,记录才是。

真正的问题是:你每次说70%、80%和90%时,分别有多经常说对?

为什么总报50%可能没有失准,却仍然不是好判断?

说到这里,一个看似聪明的办法出现了:既然高概率容易出错,那我以后全部报50%,是不是就不会过度自信了?

这样做,校准曲线看起来可能没那么差,但它不会让你成为一个好的判断者。

想象有两名门卫。

一年中,大约一半的日子会有人来访。

第一名门卫每天都说:

今天有人来的概率是50%。

一年结束后,确实有一半的日子有人来。

看上去,他的校准没什么问题。

但他的预测没有提供任何新信息。

无论是节假日、普通工作日、暴雨天,还是大型活动当天,他永远只报50%。

第二名门卫会根据预约记录、日期和活动安排调整判断:报80%的日子,大多数真的有人来;报30%的日子,大多数真的没人来。

第二名门卫不只校准好,还能区分哪些日子更可能有人来。

一个优秀的概率判断,至少要看三个维度。

校准:你报70%的事情,长期是否大约有70%发生?

区分能力:你能不能把更可能发生的事情赋予更高概率,把不太可能发生的事情赋予更低概率?

整体预测表现:你的概率预测与最终结果总体相差多远?

永远报50%的人,可能没有明显的系统偏移,却几乎没有区分能力。另一个人方向判断不错,却总把60%的机会说成95%,导致行动过猛。

因此,校准是好判断的重要组成部分,但不是好判断的全部。校准也不等于正确的因果解释。一个销售经理可能根据长期经验判断,某类客户有70%的概率成交。

结果数据显示,他的70%确实比较准。

但他对客户成交原因的解释,仍然可能是错的。他以为客户是因为价格成交,实际上客户更看重交付速度。

他的概率判断暂时有效,不代表因果模型一定正确。一个人也可能对机制理解得很深,却不善于把理解转化成准确的概率。

校准只回答一个问题:你的信心强度,是否与实际结果匹配?它不能单独证明你的因果解释正确、信息没有遗漏、方案值得实施或决策收益一定为正。

决策是否值得采取,还要考虑收益、损失、成本和风险承受能力。

一个只有30%成功概率的项目,如果成功收益极高、失败损失有限,可能值得尝试。

一个有90%成功概率的项目,如果剩余10%的失败会造成不可逆灾难,也可能不值得冒险。

概率告诉你有多可能,但值不值得做,还要看赢了赚多少、输了赔多少。两者不能混为一谈。

还有些领域本质上不可校准。"这家公司十年后能否成为行业领导者"——这类一次性、长周期、无法积累样本的判断,仍然可以给出概率,因为决策者必须表达不确定性。但它们有一个天然限制:你无法仅凭这一次结果,判断自己的置信度是否校准。如果你预测一家公司十年后有30%的概率成为行业领导者,十年后它真的成功了,不能证明30%太低;它失败了,也不能证明30%太高。越难找到可比较样本,越应该降低概率的精细程度、明确说明参考类别、承认不可量化的不确定性,避免把主观判断包装成客观精确数字。

为什么太自信和太保守,都是同一种失准?

人们谈到置信度校准时,最容易想到过度自信:项目只有六成把握,却按九成把握配置资源;对合作方了解有限,却认为"绝对不会出问题";对工期高度不确定,却承诺"两周一定上线"。

过度自信当然是一种失准,但失准不只往一个方向。

另一种失准,是系统性低估自己的判断能力。明明掌握了明显优势,仍然不敢行动;明明有充分证据,仍把所有判断压回模糊的"也许";明明过去同类判断大多正确,却始终不敢给出高于60%的概率。

如果一个人给出50%把握的判断,长期却有80%正确,他同样没有校准。

只是他的信心不是偏高,而是偏低。

所以,校准只要求一件事:你的信心强度,要与证据质量、历史表现和真实不确定性相匹配。

越难的事,为什么你反而可能越敢说确定?

你可能以为,任务越难,人自然会越谨慎。

但很多实验观察到一种反常现象:在相对简单的任务上,人们有时会低估自己的正确率;在困难任务上,信心却更容易超过实际表现。

这就是"难—易效应"。

简单题上,实际正确率可能达到八成以上,报告的信心却偏低;困难题上,实际正确率可能只有六成左右,报告的信心却明显偏高。

问题越难,人并不一定越自信。但当任务变难时,人的判断能力会下降,对自身判断质量的评估,未必能够同步下降。

为什么会这样?

因为困难任务往往缺少清晰的判断线索。

你不仅不知道正确答案是什么,也很难判断自己手里的证据究竟有多大区分力。

这时,人很容易抓住一个看起来完整的解释,然后把"我找到了一个说得通的答案"误当成"这个答案很可能是正确的"。

难—易效应是信心失准的一种表现。人的信心之所以不能准确跟随证据和任务难度变化,通常与下面三个问题有关。

第一,忽略基准率

人在判断一个具体案例时,很容易被眼前信息吸引,却忘了先问类似的事情通常有多大概率发生。

一个创业者经验丰富、表达自信、产品概念新颖。

这些信息可能都是真的。但在判断公司未来成功概率之前,仍然应该先看同类创业公司的基础成功率。

基准率不是最终答案,却应该成为判断的起点。

如果一类事情的历史发生率只有5%,你需要非常强的证据,才能把它调整到70%。

不能因为故事听起来精彩,就直接从50%甚至80%开始。

第二,把支持理由的数量当成证据的质量

当我们支持一个判断时,大脑很容易不断补充理由:

市场很大、团队不错、用户有需求、竞争对手不强、趋势正在增长。

理由越来越多,信心也越来越高。

但这些理由可能来自同一套假设。"用户有需求""市场很大""趋势正在增长",可能都依赖同一份未经验证的市场报告。

看起来有三个证据,其实只有一个信息源。

证据越多,不一定代表证据越强。

真正应该追问的是:这些证据是否彼此独立?它们能否区分不同结论?反对结论能不能同样解释这些信息?哪个关键假设一旦错误,整套判断就会失效?

第三,反馈回路断裂

天气预报员能够持续校准,一个重要原因是预测结果清晰,而且反馈来得快。

但在很多工作中,判断结果并不会自动回来找你。

你说一个项目三个月可以完成。

六个月后项目才上线,所有人忙着赶下一个项目,没有人回头检查最初的置信度为什么那么高。

你说某项活动能够提高用户留存。

活动结束后指标没有变化,团队却可能把原因归结为预算不足、时间不够、渠道不配合。

这些解释可能都成立。但如果每一次失败都只有解释,没有记录和修正,人的信心刻度就永远不会改变。

没有反馈,人只能反复相信自己的感觉;有了成组记录,偏差才会显现出来。

真正校准的人,该保留时保留,该确定时确定。

不记录预测,你怎么知道自己的信心在哪个区间最不可靠?

置信度校准不能靠提醒自己"谦虚一点"实现。

它需要一套持续运转的记录和反馈机制。

如果没有预测记录,你永远只能依靠印象评价自己:我判断人一向挺准,我对行业趋势比较敏感,我做项目排期一般不会差太多,我当时就觉得这件事不对。

这些自我评价都经不起检验。

真正的校准,需要把判断固定下来,等待结果,再进行批量比较。

可以分成七步。

第一步:把判断写成可验证命题

不要写:

这个方案应该效果不错。

"效果不错"无法结算,也无法复盘。

可以写成:

在未来八周内,该方案将使新用户七日留存率提高至少2个百分点。

一个可验证命题需要明确判断对象、时间范围、核心指标、成功阈值和数据来源。

问题越模糊,事后解释空间越大,越难形成校准。

第二步:提前固定结算规则

在结果出来之前,就要确定什么时候结算、使用哪一套数据、什么情况算成功、什么情况算失败、数据异常如何处理。

不能在结果出来以后修改规则。

如果项目没有达到目标,就把截止日期向后延长;指标没有增长,就把"增长"改成"建立了能力";效果不明显,就改口说"产生了长期价值"。

每一次移动门框,都在保护旧判断,也在破坏未来学习的可能。

需要锁定的是问题定义和结算规则,不是概率本身。

第三步:先找基准率,再看个案

不要从50%开始凭感觉上下调整。

先问类似的事情,过去通常有多大概率发生?

例如,你要判断一个新活动能否让七日留存提高2个百分点。

先看历史上类似活动的成功比例、同类用户群的平均波动、同类资源投入下的效果、行业内可比较项目的结果。

这些信息构成你的起始概率。

然后再根据本次项目的特殊条件调整:团队是否更强,资源是否更充分,用户需求是否更明确,是否存在过去没有的新风险。

正确的顺序是从参考类别出发,再根据个案证据调整。不是先爱上一个故事,再为它寻找概率。

第四步:给出概率,不只给出结论

不要只说"一定成功""大概率没问题""风险很低""我觉得可以""应该差不多"。

这些表达看起来留有余地,却无法检验。

可以使用一套相对稳定的概率刻度:50%意味着两种结果机会接近;60%略微倾向其中一种结果;70%证据明显倾向,但仍有重要不确定性;80%有较强证据,反方向需要额外条件才会发生;90%非常有把握,但仍然保留失败空间;95%除非出现重大意外或关键假设失效;99%极少使用,需要极强证据和稳定机制。

这套刻度谈不上客观真理,它的价值在于让你的语言保持一致——同一句"很有可能",不能今天代表60%,明天又代表90%。

第五步:记录证据、假设与推翻条件

每次概率判断至少记录六项内容:当前基准率是多少,支持这个判断的核心证据是什么,反对这个判断的证据是什么,最关键的假设是什么,最大的不确定性在哪里,什么新信息会改变当前概率。

结果出来以后,你不只要知道自己错了,还要知道错在哪里。没有过程记录,复盘就很容易变成事后编故事。基准率选错了?个案证据被高估了?反方证据被忽略了?关键假设失效了?还是概率强度给得过高?

第六步:允许更新,但保留变化记录

新证据出现后,概率应该改变。

例如,你最初判断项目有70%的概率按期上线。

两周后,核心技术负责人离职,概率可能下调到45%。

又过一周,替代方案验证成功,概率可能回升到60%。

更新判断不是摇摆。在证据变化后仍然坚持原概率,才是不理性。

但每次更新都要保留记录:更新时间、原概率、新概率、发生了什么新变化、为什么这些变化值得调整。

最终复盘时,你才能看到自己的更新是否及时。一个好的判断者,不只初始概率合理,也能在现实变化时及时修正。

第七步:批量结算,修正个人刻度

积累一定数量的预测后,按照概率区间分组。

例如:

置信度区间
判断数量
实际成功比例
50%—59%
30次
57%
60%—69%
40次
63%
70%—79%
35次
54%
80%—89%
25次
60%
90%以上
10次
50%

这张表可能告诉你:你在60%左右的判断上比较准确,但一旦信心超过70%,就开始明显高估自己。

这时真正有用的结论是:你在高置信度区间容易失准,需要提高给出80%以上概率的门槛。

你可以建立个人修正规则:高于80%的判断必须提供基准率;高于90%的判断必须写出至少两个反方解释;涉及重大资源投入时必须做事前验尸;如果一个判断无法说明推翻条件,不允许给出极端概率;在某类问题上连续过度自信,就主动降低该领域的初始概率。

不要因为三五次判断就急着得出结论。样本太少时,实际发生比例会有很大波动,只有当某个概率区间积累了足够多的同类判断,并且多个复盘周期都出现方向一致的偏差,才适合建立稳定的个人修正规则。

下次说"八成没问题"前,先问自己哪四个问题?

置信度校准最终可以收缩成四个问题。

类似事情通常有多大概率发生?

先找基准率,不要从感觉开始。项目成功率、招聘胜任率、活动增长率、创业存活率,都需要先找到一个合理的参考类别。没有基准率的高概率,往往只是被数字包装过的印象。

我为什么认为这次不一样?

基准率只是起点,不是终点。你需要说明,这次有哪些真实、独立、具有区分力的证据,足以把概率向上或向下调整。不是所有"特殊情况",都值得改变原来的概率。

什么证据在反对我的判断?

不要只象征性地列一个风险。要主动寻找最强的反方解释:如果我错了,最可能错在哪里?哪个关键假设可能不成立?哪条证据能够同时支持相反结论?什么信息被我忽略了?高置信度不能只建立在支持证据上,它还必须经得住反对证据的攻击。

我过去像现在这么确定时,有多经常是对的?

这是最关键的问题。如果你说自己有80%的把握,却完全不知道过去所有80%判断的实际表现,那么这个80%很可能不是校准结果。它只是一个看起来精确的感觉。

真正成熟的判断者,不会为了显得聪明而对所有事情给出答案。他可以坦然地说:我不知道,现有信息不足,我只有55%的倾向,这个结论高度依赖某个假设,如果出现新证据我会调整判断。

他同样可以果断地给出高置信度,并采取行动——只要证据充分、基准率有利、长期记录也证明自己在这类问题上表现可靠。

真正值得信任的人,是能够让自己的信心接受现实检验的人:他说60%时,知道还有40%的失败空间;他说80%时,有足够的历史记录和证据支撑;判断错了以后,他会调整刻度,而不只是寻找解释。

优秀的判断者知道自己说60%、80%和95%时,分别有多经常真的正确。

所以下一次,当你准备说:

我非常确定。

不妨先停一下,问自己:

我过去像现在这么确定的时候,
实际有多经常是对的?

"万年难遇"和"十万分之一"都不是计算结果,而是希望被包装成了数字。真正可信的,是那个能够让自己的信心刻度长期贴近现实的人。

"万年难遇"和"十万分之一"都不是计算结果,
而是希望被包装成了数字。

这是思维模型系列的第51篇。如果你身边有人经常说"我非常肯定"、"我百分百确定"但经常判断失误,把这篇文章转给他,问他一句:你过去说"这么确定"的时候,实际有多少是正确的?