CALIBRATION / AUDIT NOTE 04

预测成了 0.70,实际真的接近七成吗?

按预测概率分组后,比较每组的平均预测与实际比例。切换片区与审计角度,观察整体平均如何掩盖局部风险。

全市 · 基线审计4 个概率组 / 教学模拟

全市校准带

横轴:平均预测 纵轴:实际比例
最大组偏差−0.04预测略高
高风险组0.79平均预测
审计结论留意平均值仍可能遮蔽偏差
平均预测实际比例校准容忍带(±0.05)

校准说明的是“相似预测分数的人群平均是否对得上”;它不能单独证明模型对每个个体都可信,也不能替代覆盖范围与公平性检查。