网易首页 > 网易号 > 正文 申请入驻

ICML 2026|OFA-TAD迈向one-for-all通用异常检测新范式

0
分享至



表格异常检测(Tabular Anomaly Detection,TAD)旨在从结构化数据中精准识别显著偏离正常分布的稀有样本,其在医疗诊断、金融风控及网络安全等关键领域的数据挖掘与安全保障任务中发挥着核心作用。

然而,当前大多数 TAD 方法仍然遵循一种one-for-one(OFO)范式:每来一个新数据集,就要重新训练一个专属检测器,甚至重新调参、重新选择预处理方式。这不仅带来高昂的计算和运维成本,也让模型难以泛化到未知领域。

那么,表格异常检测能否像大模型一样,训练一次,就能迁移到不同领域的数据表上,实现真正的one-for-all(OFA)

近期,来自 Griffith University 和 Tongji University 的团队提出了 OFA-TAD,迈出了通用表格异常检测的重要一步。该方法将 TAD 从传统的 one-for-one(OFO)推进到 one-for-all(OFA)范式:模型只需在多个源数据集上训练一次,便可直接迁移到未见过的目标数据集,无需目标域微调或重新训练。



图注:传统 OFO 范式与 OFA-TAD 所追求的 OFA 范式对比。



  • 论文标题:Towards One-for-All Anomaly Detection for Tabular Data
  • 作者:Shiyuan Li,Yixin Liu,Yu Zheng,Xiaofeng Cao,Shirui Pan,Heng Tao Shen
  • 论文地址:https://arxiv.org/abs/2603.14407
  • 代码地址:https://github.com/Shiy-Li/OFA-TAD

从 one-for-one 到 one-for-all:

表格异常检测的新问题

传统 TAD 方法通常在单个数据集内训练和测试。无论是经典的 Isolation Forest、LOF、KNN,还是近年来的 AutoEncoder、DeepSVDD、MCM、DRL、DisentAD 等深度方法,它们大多默认每个数据集都有自己的训练流程。

这种范式在单一数据集上可能表现不错,但在真实部署中会遇到两个核心问题:

  • 训练成本高:每个新场景都需要重新训练检测器,往往还伴随超参数搜索和预处理选择。
  • 泛化能力弱:模型容易依赖某个数据集的局部模式,一旦迁移到新领域,性能可能明显下降。

OFA-TAD 试图回答一个更具挑战性的问题:能否训练一个通用的表格异常检测器,在面对来自医疗、金融、图像特征、网络安全等不同领域的新数据表时,仍然能够即插即用地发现异常?

这一问题并不简单。表格数据天然存在「语义鸿沟」:不同数据集的特征维度、特征含义和数值分布都可能完全不同。医疗数据中的异常可能是异常血压或心率,金融数据中的异常则可能是异常交易金额或账户行为。直接对齐原始特征语义,几乎不可行。

关键洞见:异常的共性

不在特征语义,而在邻域距离

OFA-TAD 的核心洞见是:跨领域可迁移的异常信号,不应依赖具体特征含义,而应来自更通用的邻域结构。

无论是异常病人记录、欺诈交易,还是异常网络行为,它们往往都有一个共同点:相对于正常样本,它们更「孤立」,也就是与局部邻居的距离模式更不寻常。

因此,OFA-TAD 不直接学习原始表格特征,而是将每个样本表示为其 Top-K 近邻距离序列,即「邻居距离画像」。这种表示具有两个优势:

  • 语义无关:不依赖具体列名或领域含义,不同维度的数据表也能被转化为固定长度的距离序列。
  • 异常敏感:异常样本通常会在近邻距离曲线上表现出更明显的跳变、长尾或孤立特征。

换句话说,OFA-TAD 将不同领域的数据表,统一转化为一种可比较的「距离语言」。

多视角距离编码:

让模型自动适应不同数据变换

仅使用一种距离空间仍然不够。表格数据对预处理方式高度敏感:标准化、归一化、分位数变换等操作,都会改变样本之间的邻域关系。某些异常在标准化空间中更明显,另一些异常可能在 MinMax 或 Quantile 空间中更容易被发现。



图注:不同特征变换会显著改变近邻结构与异常可分性。R:Raw,S:Standardized,and Q:Quantile。

为了解决这一问题,OFA-TAD 构建了多个由不同特征变换诱导的度量空间,例如 Raw、Standardized、MinMax、Quantile 等。对于同一个样本,模型会在每个视角下提取 Top-K 邻居距离序列,并通过分位数归一化将不同数据集中的距离尺度映射到统一范围。

这样,OFA-TAD 既避免了对某一种预处理方式的依赖,也能捕获互补的异常证据。

MoE 自适应融合:

让每个样本选择最可靠的距离视角

不同视角并非同等可靠。如果简单拼接或平均多个距离视角,反而可能让强信号被弱视角稀释。

为此,OFA-TAD 进一步引入了 Mixture-of-Experts(MoE)评分网络:

  • 视角专家:每个专家负责一个特定距离视角,利用位置编码和注意力池化建模 Top-K 邻居距离序列,并输出该视角下的异常分数。
  • 门控网络:根据不同视角的表征,动态预测每个专家的权重。
  • 加权融合:模型根据样本自身特点,自适应强调最有用的视角,抑制噪声视角,得到最终异常分数。



图注:OFA-TAD 的整体框架:多视角距离编码、MoE 自适应评分,以及多策略伪异常合成。

这种设计使得 OFA-TAD 不需要提前知道某个目标数据集最适合哪种预处理方式,而是能在推理时自动选择更可靠的距离证据。

没有真实异常标签怎么办?

多策略合成伪异常

表格异常检测通常处于 one-class setting:训练阶段只有正常样本,真实异常极少甚至完全不可见。为了在不破坏这一设定的前提下提供监督信号,OFA-TAD 设计了多策略伪异常合成机制。

具体而言,模型通过四类方式生成多样化的伪异常:

  • 流形外推:模拟远离正常数据流形的全局异常。
  • 簇间插值:模拟落在低密度区域的局部异常。
  • 噪声注入:模拟测量误差或随机扰动。
  • 特征遮蔽:模拟数据缺失或特征损坏。

这些伪异常与正常样本共同构成训练信号,帮助模型学习更稳健、可迁移的异常决策边界。

实验结果:34 个数据集、

14 个领域上的通用检测能力

实验中,OFA-TAD 在 7 个源数据集上训练一次,并在 34 个来自 14 个领域的数据集上进行评测。与之对比的 9 个代表性基线方法,包括经典方法 IForest、LOF、KNN,以及深度方法 AE、DeepSVDD、LUNAR、MCM、DRL、DisentAD。

值得注意的是,对比方法按照传统 OFO 范式在每个目标数据集上分别训练,而 OFA-TAD 不在目标数据集上重新训练或微调,仅使用目标数据集的正常训练样本作为推理时的上下文,用于近邻检索和距离归一化,并且使用固定的相同一组超参数在所有目标数据集上进行测试。

1)整体性能:一次训练,跨 34 个数据集稳定领先

在这一更严格的设置下,OFA-TAD 仍然取得了最优的整体表现。如下图所示,它在 AUROC、AUPRC 等指标上的平均排名均保持领先。



2)消融实验:多视角、MoE 与注意力缺一不可

消融实验进一步验证了各模块的重要性。如下图所示,去掉门控融合、MoE 专家、注意力池化或位置编码都会带来性能下降,其中注意力池化的影响尤为明显,说明对邻居距离证据进行自适应加权,是捕获稀疏异常信号的关键。

同时,多策略伪异常合成也提供了互补监督信号。移除任意一种合成策略都会造成性能下降,说明真实异常的形态复杂多样,需要通过多种伪异常模式共同刻画。



3)上下文鲁棒性:少量正常样本也能支持即时推理

OFA-TAD 还展现出良好的上下文鲁棒性。即使目标数据集中只有一小部分正常样本可作为上下文,模型仍能进行稳定的即时推理;随着上下文样本增多,性能进一步提升并逐渐趋于饱和。

这表明 OFA-TAD 可以在有限的正常样本下快速建立目标域邻域结构,从而完成 on-the-fly 异常检测。



4)dataset-specific scaling

更进一步,随着源数据集数量增加,OFA-TAD 的迁移性能呈现稳定提升趋势。这说明通用表格异常检测具备类似「dataset-specific scaling」的潜力:预训练数据越丰富,模型越可能学到跨领域的异常检测规律。



总结:迈向通用表格异常检测器

OFA-TAD 为表格异常检测从 one-for-one 向 one-for-all 范式转变提供了一个初步的尝试,并在无需目标域微调的跨域迁移场景下展现出了极具潜力的性能。

未来,通用表格异常检测仍有广阔的探索空间。通过引入更大规模的预训练数据集、设计更先进的训练方法,以及更深度的上下文信息利用,通用 TAD 模型有望进一步降低工业部署成本,为医疗、金融、安全等高价值场景提供更加灵活可靠的异常检测基础设施。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
湖北安陆交警副大队长王仁科,凌晨趁妻子熟睡时用哑铃将其杀害,连夜弃尸于三百里外的荒山,最终因一个枕头在2004年被抓捕归案

湖北安陆交警副大队长王仁科,凌晨趁妻子熟睡时用哑铃将其杀害,连夜弃尸于三百里外的荒山,最终因一个枕头在2004年被抓捕归案

人生录
2026-07-21 00:10:03
中菲冲突第2天!菲律宾增兵,美国发声力挺,日本发现大事不妙

中菲冲突第2天!菲律宾增兵,美国发声力挺,日本发现大事不妙

一网打尽全球焦点
2026-07-22 00:20:52
镍矿风波刚过又打柴油牌?中企撤离逼出真相,印尼终于认清现实

镍矿风波刚过又打柴油牌?中企撤离逼出真相,印尼终于认清现实

时尚的弄潮
2026-07-22 04:33:31
老鹰欢迎多尔特已17+3名单!希尔德盖伊或遭清理 4交易后硬实力反降?

老鹰欢迎多尔特已17+3名单!希尔德盖伊或遭清理 4交易后硬实力反降?

颜小白的篮球梦
2026-07-22 12:51:11
《权游》瑟曦演员怒揭黑幕:强制裸戏 不拍还被骂!

《权游》瑟曦演员怒揭黑幕:强制裸戏 不拍还被骂!

3DM游戏
2026-07-20 09:22:17
每日蜜月期终结?美国终于发现:日本会比中国更容易成为心腹大患

每日蜜月期终结?美国终于发现:日本会比中国更容易成为心腹大患

凡知
2026-07-22 13:14:06
2026年最强反腐来了!中纪委:害群之马将清除到底!

2026年最强反腐来了!中纪委:害群之马将清除到底!

职场资深秘书
2026-07-21 13:33:02
后续!广东1岁男童玩水被冲走,母亲跪地不会游泳,外公怒打女儿

后续!广东1岁男童玩水被冲走,母亲跪地不会游泳,外公怒打女儿

追踪之点
2026-07-21 19:17:18
马科斯“越顶”外交后!中俄5国,缺席东盟晚宴,美日一声不吭

马科斯“越顶”外交后!中俄5国,缺席东盟晚宴,美日一声不吭

阿晪美食
2026-07-22 11:44:50
还要诛心?西班牙夺冠巡游现“约架”海报,亚马尔拿帕雷德斯开涮

还要诛心?西班牙夺冠巡游现“约架”海报,亚马尔拿帕雷德斯开涮

星耀国际足坛
2026-07-21 19:45:01
奥迪新车官宣:7月29日,正式上市!

奥迪新车官宣:7月29日,正式上市!

科技堡垒
2026-07-21 10:55:58
曝谢贤辞灵礼仅3人出席,王菲、孙辈都没现身,谢霆锋已准备复工

曝谢贤辞灵礼仅3人出席,王菲、孙辈都没现身,谢霆锋已准备复工

小疯子耶
2026-07-22 09:56:25
争夺海峡主导权,美伊对峙难缓和,美国或将陷入更深层次地区困局

争夺海峡主导权,美伊对峙难缓和,美国或将陷入更深层次地区困局

上观新闻
2026-07-21 20:28:09
自作自受:恩佐世界杯决赛后彻底退出皇家马德里转会名单

自作自受:恩佐世界杯决赛后彻底退出皇家马德里转会名单

本泽体育
2026-07-21 17:01:46
老同学聚会每人2200,我借口陪妻坐月子,次日得知17人被带走

老同学聚会每人2200,我借口陪妻坐月子,次日得知17人被带走

晓艾故事汇
2026-07-18 15:20:12
没发生性关系也必须辞职!新加坡总理铁腕清洗内阁,严查操守

没发生性关系也必须辞职!新加坡总理铁腕清洗内阁,严查操守

明天后天大后天
2026-07-21 15:43:58
胡总编为何如此惶恐?

胡总编为何如此惶恐?

娱乐的硬糖吖
2026-07-22 06:12:41
谢贤去世前张柏芝火速安排大儿子提前返港陪伴爷爷,谢贤曾多次公开称赞张柏芝“把孩子教得很好”

谢贤去世前张柏芝火速安排大儿子提前返港陪伴爷爷,谢贤曾多次公开称赞张柏芝“把孩子教得很好”

鲁中晨报
2026-07-21 16:28:16
76岁老人直言:岁数大了,才发现有退休金和存款,成了一种负担

76岁老人直言:岁数大了,才发现有退休金和存款,成了一种负担

惟来
2026-07-21 13:37:20
中国为啥不允许安乐死?比安乐死更靠谱的办法,其实已经在推行

中国为啥不允许安乐死?比安乐死更靠谱的办法,其实已经在推行

混沌录
2026-07-13 22:18:06
2026-07-22 14:04:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13575文章数 142698关注度
往期回顾 全部

科技要闻

怕了?美财长扬言:严查中国AI

头条要闻

男子拍台球女助教屁股被报警猥亵:我"预告"过很多次

头条要闻

男子拍台球女助教屁股被报警猥亵:我"预告"过很多次

体育要闻

“不会进球”的前锋,在世界杯决赛进球了

娱乐要闻

谢贤离世风波再起!王菲探望细节曝光

财经要闻

被误伤的A股:韧性、预期与底气

汽车要闻

WAIC专访|易启未来余志勇:网易孵化按摩机器人 能识穴会“手法”

态度原创

旅游
数码
手机
艺术
家居

旅游要闻

国台办:“文物赋予底蕴、美食赋予温度”的大陆旅游新魅力亮相台北夏季旅展(两岸关系)

数码要闻

曝Meta定制版AMD MI450 GPU仅有1/2计算单元和1/3显存

手机要闻

机构看好苹果折叠屏 预测市场份额超越华为

艺术要闻

王力克 2026油画风景写生新作

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版