CHAPTER 08 · EXPERIMENT NOTE 01

指标与阈值实验台

模型只给出分数,阈值才把分数变成行动。拖动阈值,观察同一批样本如何在“多抓一些”和“少误报一些”之间移动。

一、划定决策线

0.50

分数 ≥ 阈值时判为正类。圆点上排是真正类,下排是真负类;变淡表示当前被判为负类。

真正类 真负类 实心=预测正类,变淡=预测负类

二、把业务代价写进来

扫描 0.00—1.00 后的最低成本阈值
0.00

当前实验记录

实际:正
实际:负
预测:正
0TP 命中
0FP 误报
预测:负
0FN 漏报
0TN 排除
Precision = TP / (TP + FP)0.000
Recall = TP / (TP + FN)0.000
F1 = 2PR / (P + R)0.000
当前业务总代价
FP × 误报成本 + FN × 漏报成本
0