网易首页 > 网易号 > 正文 申请入驻

AAAI 2026 Oral | 给多流数据配「私教+外援」,漂移来了也不慌

0
分享至

本文作者为:En Yu, Jie Lu, Kun Wang, Xiaoyu Yang, Guangquan Zhang。所有作者均来自于悉尼科技大学(UTS)澳大利亚人工智能研究院(AAII)。

在智慧城市、社交媒体、工业物联网等真实开放动态环境中,数据往往以多流(Multistream)形式并发产生。然而,现实世界并非完美的实验室,这些数据流往往存在异构性,且分布变化各不相同,伴随着复杂的异步概念漂移。

如何让模型既能 “专精” 于单一流的特性,又能 “博采众长” 利用流间相关性,同时还能自适应分布变化?

悉尼科技大学(UTS)研究团队提出了一种全新的漂移感知协作辅助混合专家学习框架CAMEL(Collaborative Assistance Mixture of Experts Learning)。

CAMEL 巧妙地将混合专家模型(MoE)引入流式学习,通过 “私有专家” 与 “辅助专家” 的协作机制,以及自动化专家生命周期管理,完美解决了异构多流学习中的关键问题。该工作已被 AAAI 2026 接收为 Oral 论文。

  • 论文标题:Drift-aware Collaborative Assistance Mixture of Experts for Heterogeneous Multistream Learning
  • 论文链接:https://arxiv.org/abs/2508.01598

01 引言

在真实应用场景中,数据通常以连续且无限的数据流形式产生,其生成机制往往呈现显著的非平稳性,即数据的联合概率分布随时间发生不可预测的概念漂移。这一特性与经典机器学习所依赖的独立同分布(I.I.D.)假设存在根本冲突。

然而,现有研究大多聚焦于单一或同构数据流的漂移建模,难以应对真实世界中普遍存在的多源异构数据流情形。以智能城市为例,交通传感器、气象观测、公共交通记录及社交媒体等信息流在时间尺度与演化模式上彼此独立,却潜藏着重要的动态关联。若能在概念漂移过程中有效挖掘并利用这些跨流关系,将显著提升决策的准确性与鲁棒性。

现有的方法往往陷入两难:要么假设所有流是同构的,强行统一处理导致模型失配;要么采用静态模型,一旦某个流发生漂移,重新训练会导致 “灾难性遗忘”,而增量微调又可能因为流之间的不同步演化而引发 “负迁移” 。

为此,作者正式定义了异构多流学习(HML)问题,并提出 CAMEL 框架。这是一种动态的、通过协作辅助的混合专家学习框架,通过模块化设计在 “专精 — 协作 — 适应” 之间取得平衡。

图 1:CAMEL 整体框架。每个流的 MoE 模块利用动态的私有专家库和专用的辅助专家,通过多头注意力进行协作融合。系统遵循 “测试 - 诊断 - 适应” 的循环,通过自主专家调节器动态管理专家生命周期以响应漂移信号。

02 方法论与架构设计

研究团队面向 HML 场景下的三大核心挑战:内在异构性、多流知识融合以及异步概念漂移,设计了一套模块化的漂移感知架构。

挑战一:内在异构性

CAMEL 为每个流配置异构感知的 “独立系统”:

挑战二:多流知识融合

多流数据的核心价值在于流之间的潜在相关性,但盲目融合所有流的信息会导致负迁移。

挑战三:异步概念漂移

面对数据分布的非平稳性,CAMEL 设计了自主专家调优器 ,在专家粒度上实现模型容量的在线伸缩,遵循 “测试 - 诊断 - 适应” 的闭环逻辑:

  • 漂移检测:利用基于最大均值差异(MMD)的漂移检测器监控特征分布变化。
  • 增量式扩展(Add & Freeze): 当检测到漂移且伴随性能显著下降时, 实例化一个新的私有专家学习新概念,并冻结旧专家以规避灾难性遗忘。

03 理论分析与实验验证

实验验证:为了验证 CAMEL 的有效性,研究团队构建了包含 12 个合成流和 4 个真实数据集(涵盖了天气、新闻、信用卡信息等)的 8 大基准场景。

表 1 中的结果表明,CAMEL 在几乎所有场景中实现了最先进的平均准确率,显著超越了单流基线(SRP、AMF、IWE)和多流方法(MCMO、OBAL、BFSRL)。CAMEL 的优越性在异构环境中尤为明显,现有的多流方法由于依赖共享特征或标签空间而失败。相比之下,CAMEL 的流特定模块能够在输入异构下实现稳健的性能。该框架还通过其协作辅助机制有效利用潜在的流间相关性,超越了单流方法。

表 1:各方法在所有基准上的分类准确率(%)。红色代表最优,蓝色代表次优。

04 结语

CAMEL 的提出标志着多流学习从 “静态同构” 向 “动态异构” 迈出了关键一步。 该框架以私有专家保障流内专精,以辅助专家挖掘跨流关联,并通过自动化的专家生命周期管理在漂移下实现持续适应与效率控制,为复杂、动态演化的异构多流场景提供了一种可扩展的解决方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
演员李一桐自曝被骗过钱和感情:金额高达六七位数,“他说隔天就还我,结果不还,我这辈子不会再借钱给别人了”

演员李一桐自曝被骗过钱和感情:金额高达六七位数,“他说隔天就还我,结果不还,我这辈子不会再借钱给别人了”

大风新闻
2026-10-05 21:05:04
今天14时28分,甘肃正式进入......

今天14时28分,甘肃正式进入......

天水在线
2026-10-08 12:58:08
香港大学杀入上海,招了300多人,全是高薪专业!港校内地校区要被疯抢了……

香港大学杀入上海,招了300多人,全是高薪专业!港校内地校区要被疯抢了……

阅读第一
2026-10-08 08:36:26
多位文艺界人士曾提及刘欢的酒量,戴军:喝多了就会开始讲外语

多位文艺界人士曾提及刘欢的酒量,戴军:喝多了就会开始讲外语

东方不败然多多
2026-09-27 16:21:18
AC米兰中场、皇马传奇莫德里奇周三下午现身皇马训练基地,探望皇马老队友

AC米兰中场、皇马传奇莫德里奇周三下午现身皇马训练基地,探望皇马老队友

福酱的小时光
2026-10-08 08:11:44
杭天琪女儿曝冯文娟14岁就跟爸爸一起!破坏自己的家庭

杭天琪女儿曝冯文娟14岁就跟爸爸一起!破坏自己的家庭

一盅情怀
2026-10-07 12:40:06
内鬼浮出水面!柬埔寨电诈园区幕后黑手,竟是我们信任的商会会长

内鬼浮出水面!柬埔寨电诈园区幕后黑手,竟是我们信任的商会会长

梦史
2026-06-22 23:45:10
东西部双惨!76人重创!快船崩盘!NBA怎么了?

东西部双惨!76人重创!快船崩盘!NBA怎么了?

篮球盛世
2026-10-08 13:08:16
苹果正式宣布,大量配件已经不支持这些老款设备!

苹果正式宣布,大量配件已经不支持这些老款设备!

XCiOS俱乐部
2026-10-08 09:53:41
2.3%!姆巴佩金球奖造势折腾半天还不如梅西 反倒成全了亚马尔

2.3%!姆巴佩金球奖造势折腾半天还不如梅西 反倒成全了亚马尔

雪狼侃体育
2026-10-08 14:49:11
拒绝退役,郭艾伦被淘汰后宣布重要决定,辽宁队真该出手了

拒绝退役,郭艾伦被淘汰后宣布重要决定,辽宁队真该出手了

宗介说体育
2026-10-08 13:56:41
仅3年!张本智和态度发生180度转变:开心回到成都 数次挑衅中国

仅3年!张本智和态度发生180度转变:开心回到成都 数次挑衅中国

念洲
2026-10-08 14:33:51
节后反腐风暴再起,江苏一天内两高官被查,涉及央企与海事系统

节后反腐风暴再起,江苏一天内两高官被查,涉及央企与海事系统

老嘪科普
2026-10-08 12:46:29
乌克兰摧毁莫斯科最大的沃洛达尔斯克油库!供应俄三大机场

乌克兰摧毁莫斯科最大的沃洛达尔斯克油库!供应俄三大机场

项鹏飞
2026-10-06 20:31:50
痛惜!《东北一家人》牛大妈走了,93岁一生零绯闻太难得

痛惜!《东北一家人》牛大妈走了,93岁一生零绯闻太难得

落雪听梅a
2026-10-08 19:56:59
演员彭玉去世,曾被观众亲切称为“荧屏母亲专业户”

演员彭玉去世,曾被观众亲切称为“荧屏母亲专业户”

观察者网
2026-10-08 11:11:09
何卓佳连胜张本美和与韩莹,赛后称赢球靠拼靠缠,有舞台就满足

何卓佳连胜张本美和与韩莹,赛后称赢球靠拼靠缠,有舞台就满足

阿薎美食
2026-10-08 13:16:39
鸿蒙智行回应尊界V800被指刹车时踏板断裂:尚未接到相关反馈 交付周期正常

鸿蒙智行回应尊界V800被指刹车时踏板断裂:尚未接到相关反馈 交付周期正常

财联社
2026-10-08 15:54:36
727亿平陆运河刚通航,一个尴尬问题出现:很多货目的地就是广东

727亿平陆运河刚通航,一个尴尬问题出现:很多货目的地就是广东

凡知
2026-09-23 12:18:39
1998年11月从智利出发,2026年10月5日抵达英国,英国男子耗时28年完成5万公里徒步,穿越29个国家

1998年11月从智利出发,2026年10月5日抵达英国,英国男子耗时28年完成5万公里徒步,穿越29个国家

极目新闻
2026-10-08 12:20:16
2026-10-08 20:31:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14153文章数 142745关注度
往期回顾 全部

科技要闻

江淮汽车回应"尊界V800刹车踏板支架断裂"

头条要闻

特朗普被指要求中方同高市早苗开展对话 外交部回应

头条要闻

特朗普被指要求中方同高市早苗开展对话 外交部回应

体育要闻

梅西社媒发文告别国家队 C罗点赞留言:致敬 拥抱

娱乐要闻

演员王晓慧刚担女主,就被曝已婚生子

财经要闻

央行:中国从不搞竞争性货币贬值

汽车要闻

特别版配色/碳纤尾翼 2027款深蓝L06将于10月9日上市

态度原创

手机
房产
健康
教育
亲子

手机要闻

近几年备货最少的苹果手机!iPhone Duo抢到赚到:15999元起

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

痘坑留下后,还能填平吗?

教育要闻

真是无语了,尖子生都没有做出来

亲子要闻

全国高血压日丨原发性儿童高血压青春期高发,高危儿童应提早监测

无障碍浏览 进入关怀版