这个看板只回答“当前模型系数在重采样下是否稳定”
Bootstrap 1000 次重采样给每个 β 系数估计区间。区间不跨 0 只是模型内方向稳定,不会自动消除同期活动、节假日、版本、买量和玩家自选择。
要证明因果,仍需随机留组/分期上线,或通过前趋势、平衡、共同支撑与安慰剂检验的准实验。
维度选择
Forest Plot — β 系数 + 95% CI
模型内区间稳定性总览
控制变量效应
业务读法
- 模型内系数区间不跨 0: 只表示在当前回归假设与取样方法下方向较稳定;不能消除混杂,不能证明活动有因果效果,不允许直接做业务决策。
- 模型区间跨 0: 在当前模型与重采样方式下方向不稳定;不判断真实因果效应是否为零。
- CI 宽窄: 越宽说明估计越不稳, 通常是稀疏活动 (期数少) 或共线性强 (天天开)
- 不与旧 ROI 看板合并决策: 旧看板没有反事实和增量成本,已冻结。
- 跟 Optuna 看板对比: Optuna 跨拟合 CV R² 都负值; Bootstrap 是 in-sample 不确定性, R² 都 0.5+. 两个看不同问题.