网易首页 > 网易号 > 正文 申请入驻

你的预测模型效果那么好,为何因果效应估计反而一塌糊涂?

0
分享至

一个看似简单实则棘手的问题:当我们想估计某个暴露对结果的影响——比如空气污染对住院人数的影响,或者某种药物对康复时间的影响——手头有观察数据、一个暴露变量,还有一堆候选协变量,其中有些是真正的混杂因子,有些只是噪声。此刻最关键的一步是,究竟哪些变量该被放进模型?

多数人的下意识反应是把选择权交给某种变量筛选规则:逐步回归、比较 BIC 值,甚至交叉验证 Lasso。贝叶斯模型平均也会在所有候选设定中按照拟合优度加权。然而,这些方法都围绕着一个共同的目标在优化——预测拟合度。问题恰恰出在这里:一个能在预测上做得非常漂亮的模型,完全可能对我们真正关心的因果效应给出系统性的错误估计。


这背后是一个许多分析者容易忽略的事实:预测任务和效应估计任务,奖励的是完全不同的变量特质。预测喜欢那些能解释结果方差的协变量;而要准确估计暴露效应,我们需要的是和暴露与结果都有关联的混杂因子。当一个混杂因子与暴露的关联很强,但与结果的直接关联相对较弱时,从预测准则的视角看,这个变量几乎“没用”——它能额外解释的结果方差很少,而且其中很大一部分方差已经被相关暴露变量吸收掉了。在有限的真实样本中,BIC 这类准则很可能倾向于把它丢弃。


一旦丢弃这个变量,暴露系数所承载的含义就变了。它不再仅仅是暴露本身的效应,还顺带吸收了那条被遗漏的混杂路径,于是我们得到的“效应”实际上已经被污染。2012 年,王驰、Giovanni Parmigiani 和 Francesca Dominici 在《Biometrics》上的一篇论文把这个问题命名为“调整不确定性”(adjustment uncertainty)——我们不确定该调整哪些变量来正确估计因果效应,而任何基于预测的自动选择策略都可能把我们带进沟里。

他们为此提出了一种称为贝叶斯调整混杂法(Bayesian Adjustment for Confounding, BAC)的方法,尝试将这种不确定性本身纳入建模过程,而不是用一个固定的变量子集来赌一个结论。有趣的是,这个思路还有一个著名的频率学派对应物——后双选择(post‑double‑selection)和双重机器学习(double machine learning),尽管很多从业者并未意识到这两套工具共享着同一个洞察起点。

如果用一组合成协变量来直观理解这个陷阱,不妨设想五个候选变量。其中一些同时与暴露和结果存在关联,是最典型的混杂因子;另外一些可能只与暴露相关,对结果的直接预测力微乎其微。预测导向的筛选逻辑会自然偏向那些能改善结果预测精度的变量,把看似“冗余”的强暴露关联变量拒之门外。但正是这些被抛弃的变量,隐藏着严重的方向性偏倚——它让暴露系数不再干净,让整个估计变得不可解释。


值得警惕的是,上述补救方法本身也带有锐利的边缘地带。在某些数据场景中,“调整一切能预测暴露的变量”可能恰恰是最错误的建议——纳入过多仅与暴露相关但不满足严格混杂条件的变量,反而会引入新的噪声与偏倚,让估计比什么都不调更糟糕。这意味着,无论使用 BAC 还是双机器学习,都不能完全替代对数据生成过程的实质性判断。

如果我们一直在讨论倾向性得分、子类分层和匹配,却从来没有追问过:从数据里到底该如何决定一个有效调整集?那么,上面这些讨论就是所有那些进阶方法中缺失的那个最先要回答的问题。一个好的预测模型和一个干净的因果效应之间隔着的那道沟,远比很多人想象得要深。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
重磅!第4核来了,火箭太NB了

重磅!第4核来了,火箭太NB了

体育新角度
2026-07-30 18:54:46
4种中国式大爷“穷酸打扮”,自以为洋气时髦,实则显老又油腻!

4种中国式大爷“穷酸打扮”,自以为洋气时髦,实则显老又油腻!

去山野间追风
2026-07-31 00:18:07
被踢11-0、9-2,中国足球小将被老挝、泰国狂虐,青训的出路在哪

被踢11-0、9-2,中国足球小将被老挝、泰国狂虐,青训的出路在哪

江启
2026-07-30 07:13:42
92年湖南一男子预感工业铜要大涨,40一公斤时砸下重金囤了100吨

92年湖南一男子预感工业铜要大涨,40一公斤时砸下重金囤了100吨

三农老历
2026-07-31 02:35:32
1939年,王光美在大学里留影,18岁的她气质不凡,一看就家世显赫

1939年,王光美在大学里留影,18岁的她气质不凡,一看就家世显赫

凉州辞
2026-07-28 13:00:03
吴琼现状:退休定居北京,头发全白照顾大11岁婆婆,坚持登台唱戏

吴琼现状:退休定居北京,头发全白照顾大11岁婆婆,坚持登台唱戏

一盅情怀
2026-07-30 18:33:51
“最惨星二代”廖凡,出道25年从不拼爹,妻子是周星驰的黄金搭档

“最惨星二代”廖凡,出道25年从不拼爹,妻子是周星驰的黄金搭档

生性洒脱
2026-07-31 02:27:10
生了孩子才懂,基因和教育都很无力,网友:生到学渣孩子才懂!

生了孩子才懂,基因和教育都很无力,网友:生到学渣孩子才懂!

另子维爱读史
2026-07-30 20:15:45
多少男人想娶的好媳妇

多少男人想娶的好媳妇

王二哥老搞笑
2026-07-10 10:21:39
上海一女警意外撞脸女明星!网友:神了,比亲女儿还像!本人回应“泼天流量”

上海一女警意外撞脸女明星!网友:神了,比亲女儿还像!本人回应“泼天流量”

新民晚报
2026-07-30 15:21:10
2年1.36亿顶薪,你要我们就给!但忠诚到最后,反而成了一种罪过

2年1.36亿顶薪,你要我们就给!但忠诚到最后,反而成了一种罪过

老梁体育漫谈
2026-07-31 13:04:36
泰国部长称:钱可以买商品或服务,但买不到凌驾泰国人的特权!

泰国部长称:钱可以买商品或服务,但买不到凌驾泰国人的特权!

大稻网络科技
2026-07-31 09:46:32
台湾小伙一句话捅破真相:统一不是选择题,是小学数学题

台湾小伙一句话捅破真相:统一不是选择题,是小学数学题

菁菁子衿
2026-07-31 13:15:50
下周立秋,有1个好消息,2个坏消息,3个多注意,早知早受益

下周立秋,有1个好消息,2个坏消息,3个多注意,早知早受益

叮当当科技
2026-07-30 16:06:56
为防止战争来临,中国需疯狂建造052D,而不是顶尖的055大驱,为何?

为防止战争来临,中国需疯狂建造052D,而不是顶尖的055大驱,为何?

一姐说军史
2026-07-29 11:58:41
343斤网红硬闯峨眉山!全程竹竿托腹,晕倒被抬下山,私生活混乱

343斤网红硬闯峨眉山!全程竹竿托腹,晕倒被抬下山,私生活混乱

刘蕳爱下厨
2026-07-29 16:38:42
索要5年2.87亿美金顶薪!接受1年960万美金资质报价!杜伦疯了吧

索要5年2.87亿美金顶薪!接受1年960万美金资质报价!杜伦疯了吧

世界体育圈
2026-07-31 13:04:21
河南女子患癌,去上海花600挂号费看病,医生只说几句就让她走了

河南女子患癌,去上海花600挂号费看病,医生只说几句就让她走了

千秋文化
2026-07-19 21:12:44
阿迪达斯就世界杯粉鞋扎堆致歉:认为是巧合,希望不要再发生

阿迪达斯就世界杯粉鞋扎堆致歉:认为是巧合,希望不要再发生

懂球帝
2026-07-30 23:04:07
长鑫大涨,市值破3.5万亿元!厂区周边楼市火热:回迁房租金比市区一些核心板块还贵,一项目上千套房源被员工批量买走

长鑫大涨,市值破3.5万亿元!厂区周边楼市火热:回迁房租金比市区一些核心板块还贵,一项目上千套房源被员工批量买走

每日经济新闻
2026-07-29 19:24:41
2026-07-31 14:16:49
摸鱼算法
摸鱼算法
致力于用最前沿的AI技术,换取更多发呆时间的三十岁青年。
436文章数 62关注度
往期回顾 全部

科技要闻

最多80%!GPT5.6官宣降价,中国厂商逼的?

头条要闻

华春莹同印度外交秘书对话后 外交部发声"支持印度"

头条要闻

华春莹同印度外交秘书对话后 外交部发声"支持印度"

体育要闻

菲尼克斯,止损后的漫漫长路

娱乐要闻

李小璐澄清夜宿门,被网友质疑想洗白

财经要闻

打新日确认!宇树科技IPO冲刺“冰与火”

汽车要闻

MG 07将是上汽的逆转时刻

态度原创

本地
艺术
手机
房产
公开课

本地新闻

神仙也“蓉”漂,哪吒与八仙,皆是成都出品!

艺术要闻

一位博士彻底关掉手机旅行4个月,险些陷入绝境

手机要闻

Caviar推出定制版三星Galaxy Z Fold 8,售价超1.2万美元

房产要闻

太疯狂!海口刚刚,又抢地了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版