CALIBRATION / AUDIT NOTE 04
预测成了 0.70,实际真的接近七成吗?
按预测概率分组后,比较每组的平均预测与实际比例。切换片区与审计角度,观察整体平均如何掩盖局部风险。
全市 · 基线审计4 个概率组 / 教学模拟
审计切片
全市校准带
横轴:平均预测 纵轴:实际比例最大组偏差−0.04预测略高
高风险组0.79平均预测
审计结论留意平均值仍可能遮蔽偏差
平均预测实际比例校准容忍带(±0.05)
校准说明的是“相似预测分数的人群平均是否对得上”;它不能单独证明模型对每个个体都可信,也不能替代覆盖范围与公平性检查。