网易首页 > 网易号 > 正文 申请入驻

监测预警基础50-这次学透 ARIMA之第11讲:收官、避坑、总结、进阶

0
分享至


系列简介

这是我们一系列原创技术贴,从易到难,每天学习一点。所有内容均为疾控数据分析、科研论文相关,或者说很多和现在的热门监测预警相关,所以我们这个系列就叫“监测预警基础”。

今天是第50节,最近这算是我们一个小专题吧,大概11讲,我们细化,短篇化,彻底把ARIMA模型搞懂。

今天是学透ARIMA专题第11讲的内容,终于结束了,这一篇做一些总结。

从基础原理到实操建模,从季节性模型到协变量扩展,从模型诊断到预警落地,前面 10 篇我们把 ARIMA 从入门到疾控落地的全流程彻底讲透了。

不少同行跟着代码一步步跑通了自己单位的手足口、流感预测模型,也在后台留言问了很多实操里的踩坑问题:为什么模型拟合很好预测却不准?为什么加了协变量效果反而变差?预警线用多久需要更新?

这最后一篇收官篇,我们就把整个系列收束落地,做三件事:

第一,一张表总结全系列模型选型,对照场景直接用;

第二,梳理疾控建模新手最容易踩的 8 个高频坑,提前避坑少走弯路;

第三,给出疾控场景的进阶学习路线,明确后续提升方向。


很多人学完所有模型反而会纠结 “到底该用哪个”,这里我们直接整理成疾控场景选型对照表,对应需求直接选即可:


绝大多数疾控常规监测、预测、预警场景,SARIMA 模型就完全够用它也是国内传染病预测类论文、监测方案里最常用的时间序列模型,吃透它完全能覆盖日常工作和职称论文的核心需求,不用为了 “高级” 强行堆复杂模型。


以下都是疾控同行实操里最常踩的坑,每一个都直接影响模型结果的可靠性,建议建模前对照排查。

坑 1:数据不做校验,时间顺序与周期错配比如周次排序错误、跨年 53 周未处理、周度数据frequency错设为 12,数据导入后直接建模。产生的后果就是季节性规律完全错位,模型输出的结果没有任何参考价值。需要我们第一,建模第一步先画时序图,肉眼核对趋势、周期是否符合疾病流行规律,和业务认知对齐;第二,周度数据统一剔除每年第 53 周数据,保证所有年份都是标准 52 周,周期长度固定。
坑 2:数据泄露,全量建模后再拆分测试集比如用全部数据定阶、拟合模型,再拆分训练集和测试集算误差。产生的后果就是测试集误差虚低,看起来模型效果很好,实际外推预测完全不准,属于典型的 “自欺欺人”。

需要我们严格遵循「先拆分,后建模」的黄金原则,所有定阶、拟合、调参步骤只使用训练集数据,测试集全程不碰,只用来做最终的效果验证。

坑 3:过度差分,追求 “绝对平稳”比如为了通过 ADF 检验,做 2 阶、3 阶差分,信奉 “差分越多越平稳”。结果导致过度差分会抹掉序列里的有效流行信息,反而让模型拟合和预测效果大幅下降。需要我们差分遵循「宁少勿多」原则,疾控场景的传染病数据,普通差分d和季节差分D基本都不超过 1,优先用 1 阶差分,绝不用 2 阶以上。
坑 4:跳过残差检验,拟合完就直接用比如我们跑出模型参数就直接做预测,完全跳过残差白噪声检验。结果模型可能根本没提取干净序列的有效规律,预测结果不可靠,相当于 “黑箱瞎猜”。这就需要我们必须做残差白噪声检验,这是模型合格的最低门槛,Ljung-Box 检验 P 值 > 0.05 是必过标准;通不过就回去调整模型阶数,不要硬用。
坑 5:只看训练集拟合,不看测试集外推效果比如我们经常看到历史数据拟合得严丝合缝,就觉得是好模型。结果模型严重过拟合,历史拟合越完美,未来预测越离谱,完全没法落地。这就需要我们做测试集的外推,外推误差才是评价模型好坏的核心指标,优先看测试集的 MAPE、RMSE;训练集拟合再好,测试集误差大也不能用。
坑 6:预测期太长,指望 ARIMA 预测半年一年比如直接预测 52 周、半年甚至一年的病例数,用来做全年发病预判,结果置信区间越来越宽,甚至出现负数下限,预测结果完全没有参考价值。我们使用的时候,ARIMA/SARIMA 本质是短期预测模型,周度数据推荐预测 1-4 周,最多不超过 8 周;月度数据推荐 1-3 个月,预测越久误差越大。
坑 7:协变量滥用,为了加而加比如随便找一堆变量全塞进模型,不管有没有流行病学依据,也不管有没有对应的未来数据。结果变量之间出现多重共线性,模型系数失真、稳定性变差,预测效果反而不如纯 SARIMA。我们使用这个模型的时候,协变量优先选有明确业务逻辑的 2-3 个核心变量,不是越多越好;统计不显著、不符合业务认知的变量及时剔除;做预测必须有对应预测期的协变量数据,否则不要用 ARIMAX 做预测。
坑 8:预警阈值一次建模用到底比如用前 3 年数据建一次模型,预警阈值一用就是一整年。这导致的后果就是流行强度、病毒毒株、防控环境变化后,阈值完全错位,要么频繁误报,要么漏报异常升高。

这就需要我们采用滚动建模机制,每新增 1-4 周真实数据,就把新数据加入训练集,重新拟合模型、更新预警阈值,保证阈值永远适配最新的流行规律。


把 SARIMA 用熟、用透,已经能覆盖 80% 的日常工作需求。如果想进一步提升、做更深入的研究,可以沿着这个路线进阶:

当然,可以跟着我们一步一步慢慢学

第一阶:夯实单变量时间序列基础

熟练掌握 SARIMA 模型的全流程操作,能独立完成数据清洗、建模、诊断、预警、汇报全流程,能处理 80% 的常规传染病预测预警需求。这是疾控工作者的核心基本功,也是后续进阶的基础。

第二阶:掌握滚动预测与多模型对比

  1. 学会用循环代码实现滚动建模,模拟真实监测的逐周预测,更贴近实际工作场景;对比指数平滑模型、Prophet 等其他时间序列方法,针对不同疾病选最优模型,而不是只用 ARIMA。

第三阶:扩展多因素与滞后效应研究
  1. 学习分布滞后非线性模型(DLNM),专门研究气温、湿度等因素对发病的滞后效应、非线性影响,是传染病环境因素研究的标配方法,非常适合写论文;

  2. 拓展到空间时间序列,结合分县区的发病数据做空间预警、区域风险研判,适合市级、省级疾控的区域监测场景。

第四阶:混合模型与机器学习结合

如果追求更高的预测精度,可以尝试混合模型:用 ARIMA 提取序列的线性规律,再用 XGBoost、LSTM 等机器学习模型拟合非线性残差,两者结合进一步提升预测效果,适合重点传染病的精准预警、科研课题研究。


1. 从简单模型开始,不要盲目追求复杂

很多人刚入门就想上机器学习、复杂混合模型,但实际疾控工作里,稳定、可解释、易复现才是第一位的。SARIMA 方法成熟、结果好解释、汇报和写方案都容易被认可,先把基础模型用熟、用透,再考虑进阶。

2. 业务逻辑永远优先于统计结果

时间序列只是工具,所有模型结果都必须符合传染病流行规律。如果模型算出 “气温越高手足口发病越少” 这种明显违背业务认知的结论,哪怕统计上显著也不能用,先回头查数据、查模型设定,不要迷信统计结果。

3. 先跑通,再优化

不要一开始就追求完美模型。先跟着流程跑通一个完整的「建模 - 验证 - 预警」闭环,再逐步调整参数、补充协变量、优化阈值。动手实操永远比只看理论学得快,跑通第一个模型,你就已经超过了 90% 只停留在 “看教程” 的人。

到这里,「这一次一定学透 ARIMA」全系列 11 篇就全部更新完成了。整个系列我们始终围绕疾控的真实工作场景,没有堆砌复杂的数学公式,只讲能用、好用、能落地的方法,目标就是让每一位疾控同行都能跟着教程,跑通自己的第一个时间序列模型,把方法真正用到日常监测、分析和预警工作里。

如果还有具体的建模、代码问题,或者想了解其他疾控统计方法,都可以留言交流。希望这一系列内容,能帮你做出更严谨、更有价值的疾控分析结果。


编辑:普通疾控人 | 审核:诗酒趁年华

文章来源 | 原创

说明 | 转载只为分享,如有侵权联系删除

©版权声明 | 部分信息和图片来自公开网络

转载请注明

再次转载请注明出处


科普健康 | 宣传疾控

本号为多位疾控机构从业者运营

重点关注国内外健康事件

致力于疾控科普

在做好科普服务大众的同时

做好疾控机构的宣传

让更多的人了解疾控,拥抱健康

欢迎加「小编」微信(cdcjkr126com)

本文具体说明

本文为原创内容,文章为个人理解所学,不涉及疫情信息及内部保密数据,发表的目的为自我总结及给有需求的人士学习使用。如有不妥之处,欢迎联系小编修改、删除。

更多精彩视频,尽在“CDC疾控人”视频号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
21-8 屠杀夺冠!渡边勇大/田口真彩完成蜕变,国羽混双世锦赛大敌成型,切勿轻敌

21-8 屠杀夺冠!渡边勇大/田口真彩完成蜕变,国羽混双世锦赛大敌成型,切勿轻敌

小兰看体育
2026-08-02 18:22:29
先被罗纳尔迪尼奥取代,后跟梅西难以共存,南美足球先生生不逢时

先被罗纳尔迪尼奥取代,后跟梅西难以共存,南美足球先生生不逢时

足篮大世界
2026-06-27 00:08:21
“儿媳不辞职,我不住院”婆婆带外孙8年,生病却让儿媳辞职照顾

“儿媳不辞职,我不住院”婆婆带外孙8年,生病却让儿媳辞职照顾

清水家庭故事
2026-08-01 16:35:04
北京连下六道指令,陕西硬抗整整四年,最高指示:让749局来

北京连下六道指令,陕西硬抗整整四年,最高指示:让749局来

小哥很OK
2026-01-30 15:25:18
佛得角门将沃齐尼亚加盟智利球队科洛科洛生变,对方无法兑现2.7万美元月薪,墨西哥克雷塔罗送上一年百万美元合同展开争夺

佛得角门将沃齐尼亚加盟智利球队科洛科洛生变,对方无法兑现2.7万美元月薪,墨西哥克雷塔罗送上一年百万美元合同展开争夺

第一财经资讯
2026-08-01 19:16:25
加速高血脂恶化的行为:米饭排第4,第1名很多人都没意识到

加速高血脂恶化的行为:米饭排第4,第1名很多人都没意识到

冷眼看世界728
2026-08-02 16:08:26
“三龙”聚首!歼-20 歼-16 歼-10C大机群体系对抗

“三龙”聚首!歼-20 歼-16 歼-10C大机群体系对抗

环球网资讯
2026-08-02 17:56:21
话里有话!湖人高管早预料!!詹姆斯会有!

话里有话!湖人高管早预料!!詹姆斯会有!

柚子说球
2026-08-02 20:35:17
意大利名记发表雄文:梅西是全球媒体炒作骗局,天赋难及马拉多纳

意大利名记发表雄文:梅西是全球媒体炒作骗局,天赋难及马拉多纳

杨华评论
2026-08-02 17:17:23
婚外胚胎案最让人破防的一幕,丈夫选胚胎,女儿录取通知书到了

婚外胚胎案最让人破防的一幕,丈夫选胚胎,女儿录取通知书到了

宝哥精彩赛事
2026-08-02 15:50:12
中国2亿老人“混吃等死”!陷进废物式养老困境,是福是祸?

中国2亿老人“混吃等死”!陷进废物式养老困境,是福是祸?

晓焎科普
2026-07-28 22:38:18
官媒发文!32岁陈梦高调宣布新身份,这一回她让整个体坛刮目相看

官媒发文!32岁陈梦高调宣布新身份,这一回她让整个体坛刮目相看

探长影视解说
2026-08-01 17:22:31
现场视频!解放军555舰做好对空抗击准备,飞行员警告:菲律宾军机,我是中国空军,你距离我黄岩岛领空40千米,不要抵近,否则将遭到拦截

现场视频!解放军555舰做好对空抗击准备,飞行员警告:菲律宾军机,我是中国空军,你距离我黄岩岛领空40千米,不要抵近,否则将遭到拦截

每日经济新闻
2026-08-01 02:12:21
俄媒爆猛料!中国六代机已经飞了半年,其实是故意让卫星拍到的!

俄媒爆猛料!中国六代机已经飞了半年,其实是故意让卫星拍到的!

晨曦故事汇聚
2026-08-02 15:09:46
刘翔的烦恼:上一年耐克的1400万代言费还没花完,今年又到账了

刘翔的烦恼:上一年耐克的1400万代言费还没花完,今年又到账了

喜欢历史的阿繁
2026-08-02 00:14:45
建国初期,林彪接替周恩来主持军委工作,建议抽调大批干部轮流入学,得到毛泽东的肯定和批准

建国初期,林彪接替周恩来主持军委工作,建议抽调大批干部轮流入学,得到毛泽东的肯定和批准

零点历史说
2026-07-30 16:30:07
《蜘蛛侠4》新女主杀疯了:全网狂喊荷兰弟换老婆

《蜘蛛侠4》新女主杀疯了:全网狂喊荷兰弟换老婆

动物奇奇怪怪
2026-08-02 16:00:59
国乒女队终于等来一个“怪才”了,接近一米八的身高,竟然还是个左撇子这种天赋有多吓人?

国乒女队终于等来一个“怪才”了,接近一米八的身高,竟然还是个左撇子这种天赋有多吓人?

乒乓助手
2026-07-28 00:19:14
海滩热恋抓拍!菲利克斯与21岁阿根廷网红水中拥吻,新恋情浮出水面

海滩热恋抓拍!菲利克斯与21岁阿根廷网红水中拥吻,新恋情浮出水面

友谊第一
2026-08-02 12:04:24
笑死!是广西人就要会找地方躲太阳,网友:上学都没排这么整齐过

笑死!是广西人就要会找地方躲太阳,网友:上学都没排这么整齐过

另子维爱读史
2026-08-02 19:35:25
2026-08-02 20:55:00
CDC疾控人 incentive-icons
CDC疾控人
关注疾控,科普健康
226文章数 7关注度
往期回顾 全部

科技要闻

零跑月销10万破纪录!比亚迪奇瑞海外卖爆

头条要闻

媒体:解放军对菲军机发出警告 释放出非常重要的信号

头条要闻

媒体:解放军对菲军机发出警告 释放出非常重要的信号

体育要闻

常规赛MVP可以衡量常规赛成就吗?

娱乐要闻

徐克和多位港星送别施南生

财经要闻

长鑫科技四万亿市值背后的资本与周期

汽车要闻

历史性里程碑时刻 零跑7月交付达101267台

态度原创

教育
家居
手机
公开课
军事航空

教育要闻

2026高考录取分垫底的3所985大学,最低已跌破500!让人不敢相信

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

小米手机正式涨价:小米17、REDMI K90/Turbo 5全系上调300-500元

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:在伊朗和中东多国请求下 同意取消打击伊朗

无障碍浏览 进入关怀版