朋友喝了酒还开车回家,一路平安,第二天说:“你看,我就说没事吧。”这个决定是对的吗?
当然不是。结果平安,只是这次运气好;决定本身仍然是糟糕的。
这就是结果偏差:用结果的好坏来评判决策或判断的好坏。
预测里的结果偏差
你预测“明天下雨”给了 70%,结果没下。是不是预测错了?
不一定。70% 的意思是,类似情况下十次里大约有三次不会下。单次没下,完全在预料之中。判断一个人预测得好不好,要看他在很多次预测中,说 70% 的事是否真的大约七成发生了。这正是 Brier 分数和校准曲线在做的事。
四种组合
把“推理质量”和“结果”分开看,会得到四种情况:
- 推理好,结果好:应得的成功。
- 推理好,结果坏:运气不好,方法不用改。
- 推理差,结果好:侥幸,最危险,因为它会让你重复错误的做法。
- 推理差,结果坏:真正值得改进的地方。
结果偏差让我们把第二种当成失败、把第三种当成成功,于是改掉了好方法,保留了坏习惯。
写预测时怎么防
- 把推理写完整:基础概率、支持和反对理由、关键不确定性。这样复盘时才有东西可评价。
- 接受“好的概率也会落空”:给 70% 就意味着要准备好三成的落空。
复盘时怎么认
复盘时,先评价推理过程,再看结果。如果你发现自己只因为“没说中”就否定了一条推理扎实的预测,或者只因为“说中了”就肯定了一条拍脑袋的预测,那就是结果偏差在起作用。
好结果不等于好判断:复盘时把推理和运气分开看。