深度专题 FEATURES — 2
因果推断前,先把两张表连对
两张表一旦把人连错,因果结论也会跟着偏;这篇论文把链接错误正式纳入推断框架。
Pinterest怎样扩展模型评估
Pinterest用Ray把模型评估做成分布式平台,并行实验越多,工程价值越明显。
速览 BRIEFS — 8
PAPER
多种处理,别再逐个算效果
同时调高多种干预的实施概率,不必穷举所有组合,也尽量不扭曲它们原有的关联。
PAPER
少数极端用户会击穿实验推断
少数“鲸鱼用户”足以让常规实验置信区间失准,样本再大也未必能解决。
PAPER
个体效果分位数能推断多准
随机试验看不见每个人的另一种结局,新方法把个体效果分位数的推断边界收得更紧。
PAPER
敏感性分析需要一套通用语言
用“多少人违背假设”统一衡量不同因果结论有多稳
PAPER
AUC正常,不代表人人都校准
总体指标看着正常,局部人群仍可能被系统性高估或低估。
PAPER
稀疏评测也能预测完整榜单
用历史缓存回答补齐稀疏榜单,在少跑任务的同时估算模型整体表现。
PAPER
干扰检验之后,别直接换模型
先查有没有溢出、再据此换模型,也会带来偏差;新方法把这次选择纳入推断。
PAPER
调查插补完成,不等于估计无偏
机器学习能补齐问卷,却未必补对总体均值;新框架把去偏和误差估计接回分析流程。