增益模型 (Uplift Model) 离线评估指标体系(Qini 曲线、Qini 分数、AUUC - Area Under Uplift Curve 与 Cumulative Gain 曲线)是数据科学家解决“由于单一个体反事实不可观测,无法像常规分类模型那样直接计算 Accuracy/AUC/LogLoss”的核心评估标准;Qini 曲线绘制步骤:1) 模型打分排序:根据 Uplift 模型预测的增益得分
τ^(x) 对测试集用户降序排列;2) 累积计算:取排名前
k% 的人群,分别统计该人群中实验组正例数
nt,1(k) 与对照组正例数
nc,1(k);3) Qini 增益公式:
Q(k)=nt,1(k)−Nc(k)Nt(k)nc,1(k)(度量若对前
k 人群施加干预,相比不干预能多获得的
纯因果净增量正例转化数);4) AUUC / Qini 曲线与随机基线(连接原点与终点的对角直线)构成的净增益面积;Qini 分数越高,说明模型越能将高增益敏感人群排在头部。