网易首页 > 网易号 > 正文 申请入驻

百川公司让AI皮肤病诊断精准度暴涨28%的秘密武器

0
分享至



这项由百川公司(Baichuan Inc.)联合北京大学第一医院皮肤科、清华大学生物医学工程学院和香港大学共同完成的突破性研究,于2026年1月发表在计算机视觉领域顶级会议论文集中,论文编号为arXiv:2601.09136v1。有兴趣深入了解的读者可以通过该编号查询完整论文。这项研究成果颠覆了人们对AI模型"越大越好"的传统认知,证明了巧妙的设计比单纯的参数堆叠更为重要。

想象你去看皮肤科医生,医生需要仔细观察你皮肤上的每一个细节——颜色、形状、纹理、边界等等,然后结合这些视觉线索做出准确诊断。传统的AI模型就像一个注意力不集中的实习医生,虽然看了很多资料(拥有海量参数),但在观察皮肤病变时总是被无关的背景信息分散注意力,无法准确识别关键的病理特征。

百川公司的研究团队发现了一个令人震惊的现象:那些参数高达数千亿的超大型AI模型,在皮肤病诊断任务上的表现竟然还不如他们精心设计的70亿参数小模型。这就好比一个记忆力超强但不会重点观察的学生,反而输给了一个善于抓重点的聪明学生。这种现象的根本原因在于,传统AI模型存在"弥散注意力"问题——它们无法有效区分关键的病理特征和无关的背景噪音。

更令人惊喜的是,研究团队不仅让他们的小模型在Fitzpatrick17k这个权威皮肤病诊断基准测试中创造了新纪录,Top-1准确率提升了12.06%,Top-6准确率更是暴涨28.57%,超越了包括GPT-5.2在内的所有竞争对手。这意味着当医生需要从AI推荐的前6个诊断候选中选择时,百川的模型能提供更准确、更有价值的诊断建议。

一、信息传输的艺术:将诊断过程重新定义

百川研究团队提出了一个全新的视角来理解AI皮肤病诊断:将整个过程看作一个信息压缩和解码系统。这个比喻非常形象——就像我们用压缩软件处理照片一样,AI模型需要将皮肤病图像中的海量像素信息压缩成高质量的特征表示,然后再将这些特征解码成准确的诊断结果。

在这个信息传输过程中,研究团队识别出两种不同类型的视觉信息。第一种是"可描述特征",比如红斑的颜色、皮疹的形状、病变的大小等,这些都是医生可以用语言清楚描述的临床征象。第二种是"不可描述特征",指那些微妙的病理纹理和视觉模式,虽然人眼能够感知,但很难用准确的语言表达出来。

传统AI模型的问题在于无法有效平衡这两种信息的处理。它们要么过度依赖可描述的表面特征而忽略了深层的病理模式,要么在处理复杂视觉信息时产生信息瓶颈,导致关键诊断线索的丢失。百川团队的解决方案是设计一个两阶段的训练策略,分别优化这两种信息的传输效率。

这种信息传输的观点带来了一个重要启示:AI模型的诊断能力不仅取决于它记住了多少医学知识(参数数量),更关键的是它能否高效地从医学图像中提取和传输有价值的视觉信息。这就解释了为什么百川的70亿参数模型能够击败那些参数量超过200亿的巨型模型——不是因为它知道得更多,而是因为它看得更准。

二、虚拟宽度动态视觉编码器:让AI拥有"火眼金睛"

百川研究团队的核心创新是一个叫做"虚拟宽度动态视觉编码器"(DVE)的技术。为了理解这项技术的巧妙之处,我们可以用照相机的比喻来解释。

传统的AI视觉系统就像一台固定焦距的老式相机,无论拍摄什么场景都使用相同的参数设置。当这种"相机"观察皮肤病变时,它无法根据不同病变的特点调整自己的"拍摄参数",因此经常出现重点不突出、背景干扰严重的问题。

而百川团队设计的DVE技术则像一台智能的自动对焦相机,能够根据观察对象的不同特点动态调整自己的"镜头参数"。当它检测到皮肤上的红斑时,会自动优化颜色感知能力;当它发现可疑的边界时,会增强边缘检测敏感度;当它遇到复杂的纹理模式时,会调用专门的纹理分析"镜头"。

这种动态调整能力的实现基于一个叫做FDLinear(频率动态线性层)的创新技术。研究团队将传统的静态权重矩阵转换为多个频率域的动态基础矩阵。简单来说,就是将一个"万能工具"分解为多个"专用工具",然后根据具体任务的需要动态组合这些专用工具。

这种设计的巧妙之处在于实现了"虚拟扩容"。虽然物理参数没有增加多少(额外开销不到5%),但模型的几何表征能力却获得了指数级的提升。这就像一个魔术师的工具箱,看起来很小,但通过巧妙的组合可以变出无数种不同的道具。

为了验证这种"虚拟扩容"的效果,研究团队在经典的非线性可分问题(如螺旋线、同心圆等)上进行了测试。结果显示,传统的静态层只能实现约50%的准确率,基本等同于随机猜测,而DVE技术能够完美地解决这些复杂的几何分离问题。这证明了DVE确实能够"展开"复杂的视觉流形,让原本纠缠在一起的特征变得线性可分。

三、两阶段强化学习:先学描述再学诊断

百川团队采用了一个类似医学院学生培养的两阶段训练策略。就像医学生需要先学会准确描述病理现象,再学会综合分析做出诊断一样,AI模型也需要分步骤掌握这两种不同的技能。

第一阶段被称为"语义对齐与压缩"阶段。在这个阶段,模型的任务是学会用标准的医学语言准确描述皮肤病变的各种特征。研究团队收集了约5000张皮肤病图像,并为每张图像制作了结构化的医学描述标签。这些标签包括颜色、位置、形状、病变类型、数量、大小、质地、边界特征、表面特征、分布特征和周围特征等12个关键维度。

模型在这个阶段的训练目标是将复杂的视觉信息压缩成这些可以用语言表达的医学特征。这个过程就像训练一个医学生学会用专业术语准确描述看到的症状。为了确保描述质量,研究团队设计了一个基于大语言模型的奖励机制,对每个描述维度进行0-10分的评分,只有达到6分以上才被认为是合格的描述。

第二阶段被称为"诊断细化与解码"阶段。在掌握了准确描述的基础上,模型开始学习将这些显性特征与隐性的病理纹理相结合,做出最终的诊断判断。这个阶段的训练不再使用传统的监督学习方法,而是采用强化学习技术。

强化学习的优势在于能够处理医学诊断中的一个重要现实:同一种疾病往往有多个不同的医学名称或表达方式。传统的监督学习需要标签完全匹配才认为是正确答案,但强化学习可以通过奖励函数灵活地评估语义等价的不同表达。这就像考试时不仅认可标准答案,也承认其他合理的表达方式。

在诊断阶段的奖励设计中,研究团队采用了位置权重策略。模型需要输出Top-K个最可能的诊断候选,如果正确答案出现在第一位,获得最高奖励;出现在第二位,获得稍低奖励,以此类推。这种设计鼓励模型不仅要找到正确答案,还要将最可能的答案排在最前面,这对临床实践具有重要意义。

四、注意力机制的华丽转身:从全局扫描到精准定位

研究团队通过详细的注意力可视化分析揭示了他们的方法如何根本改变AI模型的"观察方式"。这种分析就像给AI模型装上了"眼球追踪器",让我们能够清楚地看到模型在诊断时到底在关注什么。

传统大型语言视觉模型的注意力模式就像一个缺乏经验的医学生,面对皮肤病变时目光游移不定,既看病变本身,也大量关注周围的健康皮肤和背景信息。在研究团队的可视化结果中,这些模型的注意力热力图呈现出明显的"弥散"特征,注意力权重广泛分布在整个图像区域,没有明确的重点。

相比之下,经过百川团队优化的模型展现出截然不同的注意力模式。它们的注意力就像经验丰富的皮肤科专家,能够精准锁定关键的病理区域,对无关背景几乎视而不见。在注意力热力图中,这表现为高度集中的"热点",精确覆盖皮肤病变区域,而周围区域则保持"冷静"。

更令人印象深刻的是注意力权重分布的统计分析。研究团队统计了500个测试样本中所有注意力权重的分布情况,发现了一个显著的"右移"现象。传统模型的注意力权重主要集中在0.00到0.01的低值区间,这意味着模型对大部分区域都只是"随便看看",没有强烈的关注重点。

而百川团队的模型则表现出完全不同的分布模式:低权重区间的频次大幅减少,高权重区间(大于0.06)的频次显著增加。这种分布变化反映了一个质的转变——从不确定的全局扫描转向高置信度的精准诊断推理。

这种注意力模式的改变不仅仅是技术指标的提升,更代表了AI诊断思维方式的根本性进步。传统模型的弥散注意力类似于"撒网式"观察,希望通过覆盖更多信息来弥补判断力的不足。而优化后的模型则采用"聚焦式"观察,能够迅速识别并专注于最关键的诊断证据。

五、临床导向的评估体系:让AI评估更贴近医疗现实

百川研究团队在评估方法上也进行了重要创新,提出了一套更符合临床实践的评价标准。传统的AI评估方法采用严格的标签匹配原则,就像考试中的标准答案一样,只有完全一致才算正确,任何偏差都被视为错误。但这种评估方式在医学领域存在明显缺陷。

在真实的医疗环境中,疾病诊断往往具有层次性和相关性。比如,如果正确诊断是"特应性皮炎",而AI模型给出"湿疹"的诊断,从传统评估角度这是错误答案,但从临床角度这是完全可以接受的,因为特应性皮炎本身就是湿疹的一种亚型,在治疗方向上是一致的。

研究团队设计的新评估体系考虑了疾病的分层结构和临床意义。正确的诊断不仅包括完全匹配的情况,还包括医学上等价的同义词、缩写形式,以及临床上有效的子类或父类诊断。这就像考试评分时不仅认可标准答案,也承认其他医学上正确的表达方式。

这套评估体系特别重视诊断安全性。如果AI模型的预测跨越了关键的临床边界——比如将恶性肿瘤误诊为良性病变,或将传染性疾病误判为非传染性疾病——这种错误会被严格惩罚,体现了医学"首先不伤害"的基本原则。

通过这种更加贴近临床实践的评估方法,百川团队证明了他们的模型不仅在技术指标上表现优异,更重要的是在临床实用性方面具有显著优势。这种评估思路的创新为医疗AI的发展提供了新的标准和方向。

六、实验结果:小模型的大胜利

百川团队在两个重要数据集上进行了全面的性能测试,结果令人震撼。第一个是公开的Fitzpatrick17k数据集,这是皮肤病AI诊断领域的权威测试基准,包含了广泛的皮肤病类型。第二个是他们自建的专家验证数据集,由三甲医院具有五年以上临床经验的皮肤科医生独立审核和标注。

在Fitzpatrick17k数据集上,百川的70亿参数模型取得了29.19%的Top-1准确率,相比最强的对比模型GPT-5.2提升了10.95%,相比参数量达2350亿的Qwen3VL模型提升了12.06%。更令人印象深刻的是Top-6准确率的表现,达到了71.16%,比Qwen3VL模型高出28.57%。这意味着在临床最常用的候选诊断列表中,百川模型能提供更加准确和有价值的建议。

在专家验证的内部数据集上,百川模型同样表现出色。虽然GPT-5.2在Top-1准确率上略有优势(39.11% vs 36.63%),但百川模型在Top-2到Top-6的所有指标上都显著超越了GPT-5.2。特别是Top-6准确率达到了79.21%,远超GPT-5.2的68.81%和Qwen3VL的64.00%。

这种性能差异的意义远超数字本身。在真实的临床场景中,医生很少会只依据AI的第一个诊断建议做决定,更多时候会参考AI提供的多个候选诊断进行综合判断。百川模型在Top-2到Top-6指标上的全面领先,意味着它能为医生提供更全面、更可靠的诊断参考,这对减少误诊和漏诊具有重要价值。

值得注意的是,百川模型的参数效率极高。它用仅仅70亿个参数就击败了那些参数量超过200亿甚至2000多亿的巨型模型,这充分证明了"精巧设计胜过暴力堆叠"的技术理念。这种高效性不仅降低了计算成本,也为模型在实际医疗环境中的部署创造了更好的条件。

七、技术细节的精妙之处

百川团队在技术实现上的每一个细节都体现了深思熟虑的设计。他们选择Qwen2.5-VL-Instruct-7B作为基础模型,这本身就是一个经过大规模预训练的优秀多模态模型。在此基础上,他们在视觉Transformer的第8层、第16层、第24层和第32层的多层感知机中用FDLinear算子替换了传统的静态线性层。

FDLinear算子的设计巧妙地平衡了性能提升和计算成本。研究团队将频谱基的数量设定为输入维度的一半,这样既能提供足够的表征能力,又避免了过度的参数膨胀。整个动态视觉编码器的额外参数开销控制在原始视觉编码器的5%以内,这种高效性为技术的实际应用奠定了基础。

在训练策略上,两个阶段使用了不同的学习率设置。第一阶段采用1×10??的学习率进行医学描述学习,使用余弦预热策略确保训练稳定。第二阶段从第一阶段的检查点继续训练,使用更小的学习率5×10??进行强化学习优化。这种渐进式的训练策略确保了模型能够逐步掌握从描述到诊断的复杂映射关系。

整个强化学习流程基于VERL框架实现,采用GRPO(群组相对政策优化)算法。这种算法的优势在于不需要单独的评价网络,通过在候选输出组内进行相对比较来稳定训练过程。这种设计既提高了训练效率,又保证了优化过程的稳定性。

八、局限性与未来展望

百川团队在论文中坦诚地讨论了他们研究的局限性,这种学术诚实值得赞赏。首先,他们承认模型可解释性方面还有待进一步改进。在第二阶段训练后,模型倾向于生成更简洁的诊断说明,这虽然提高了效率,但可能影响医生理解模型的推理过程。未来他们计划与皮肤科医生合作,设计更系统的可解释性评估指标。

其次,研究中使用的图像主要是在相对简单的背景条件下拍摄的,这可能限制了模型在复杂真实环境中的表现。在实际的医疗场景中,患者可能在各种光照条件、背景环境下拍摄皮肤照片,模型需要具备更强的环境适应能力。研究团队表示将扩展数据集,包含更多样化的拍摄环境,以提高模型的鲁棒性和泛化能力。

尽管存在这些局限性,这项研究为医疗AI领域开辟了新的技术路径。它证明了通过优化信息传输效率和几何表征能力,小参数模型能够在专业医疗任务上超越大参数通用模型。这种"专精胜过泛化"的理念不仅在皮肤科诊断中得到验证,也可能为其他视觉密集型医疗专科(如病理学、放射学)的AI应用提供借鉴。

研究团队表示,他们正在探索将这种压缩-解码框架推广到更多医学影像诊断任务中。未来可能会看到基于类似原理的AI系统在肺部CT诊断、眼底疾病筛查、皮肤镜检查等领域发挥作用,为更多患者提供准确、及时的诊断辅助。

说到底,百川公司的这项研究告诉我们一个重要道理:在AI发展的道路上,智慧的设计往往比蛮力的堆叠更有效。他们用70亿参数的"小"模型击败了2350亿参数的"巨无霸",不是因为奇迹,而是因为他们找到了问题的本质——如何让AI真正"看懂"医学影像中的关键信息。这种突破不仅推动了皮肤病AI诊断技术的发展,更为整个医疗AI领域提供了新的思路和方向。

对于普通人来说,这项研究意味着什么呢?它意味着未来我们可能拥有更准确、更高效、成本更低的AI医疗助手。当你怀疑皮肤上的某个变化可能有问题时,只需要拍一张照片,就能获得专业水平的初步诊断建议。更重要的是,这种技术的高效性使得它有望在基层医疗机构和偏远地区得到普及,让更多人能够享受到高质量的医疗服务。这不是遥不可及的科幻场景,而是正在变为现实的技术进步。

Q&A

Q1:百川公司的SkinFlow模型为什么只用70亿参数就能击败2350亿参数的大模型?

A:关键在于百川团队重新定义了问题本质。他们发现皮肤病诊断的关键不在于记住更多知识(参数数量),而在于能否高效提取和传输关键视觉信息。他们的虚拟宽度动态视觉编码器能根据不同病变特点动态调整"观察参数",就像智能相机能自动对焦一样,实现了从不确定的全局扫描到高置信度精准诊断的转变。

Q2:两阶段强化学习训练是如何工作的?

A:类似医学生的培养过程,先学描述再学诊断。第一阶段让模型学会用标准医学语言准确描述皮肤病变的颜色、形状、位置等12个关键特征,相当于压缩显性信息。第二阶段在此基础上学习结合隐性病理纹理做出诊断判断,采用强化学习处理医学术语的多样性表达,比传统监督学习更灵活。

Q3:这项技术什么时候能在实际医疗中使用?

A:从技术成熟度看已经具备应用基础,模型在权威测试中表现优异,参数效率高便于部署。但研究团队提到还需要改进模型可解释性,并扩展训练数据以适应更复杂的拍摄环境。预计经过进一步优化后,这种技术有望在基层医疗机构和远程医疗场景中率先应用,为皮肤病初步筛查提供辅助。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女子和男网友去私人影院,自述手都伸进去了,事后被拉黑

女子和男网友去私人影院,自述手都伸进去了,事后被拉黑

一杯浓茶
2026-04-23 20:55:03
穆帅:我会在赛季后10天内决定未来;奥塔门迪去留由他决定

穆帅:我会在赛季后10天内决定未来;奥塔门迪去留由他决定

懂球帝
2026-04-25 04:20:06
日舰闯台海3天后,高市被逼辞职,岸田已扛旗,052D抵近奄美大岛

日舰闯台海3天后,高市被逼辞职,岸田已扛旗,052D抵近奄美大岛

铁锤侃侃而谈
2026-04-21 15:00:04
嗜赌成性只是冰山一角,婚内出轨、睡有妇之夫,体坛丑闻毁三观

嗜赌成性只是冰山一角,婚内出轨、睡有妇之夫,体坛丑闻毁三观

梦想总会变成真
2026-04-23 01:11:47
真的慌了!看了ChatGPT Images 2.0一键生成的PPT,我们吓出一身冷汗……

真的慌了!看了ChatGPT Images 2.0一键生成的PPT,我们吓出一身冷汗……

秋叶PPT
2026-04-23 08:22:02
继人民日报发声后,官媒再次三问董宇辉,言辞犀利,字字揭他老底

继人民日报发声后,官媒再次三问董宇辉,言辞犀利,字字揭他老底

离离言几许
2026-04-23 20:04:00
何塞·穆里尼奥确认“皇马条款”,重燃回归伯纳乌传闻

何塞·穆里尼奥确认“皇马条款”,重燃回归伯纳乌传闻

绿茵情报局
2026-04-25 01:20:20
秦皇岛大姐逃单偷狗后续:正脸曝光,被人认出已社死,摊主不和解

秦皇岛大姐逃单偷狗后续:正脸曝光,被人认出已社死,摊主不和解

奇思妙想草叶君
2026-04-24 11:33:43
局势恶化!日本开出危险一枪,中国红线遭踩踏,东部战区行动了

局势恶化!日本开出危险一枪,中国红线遭踩踏,东部战区行动了

云舟史策
2026-04-23 07:32:35
炸锅!美部长当众承认:中国一颗H200芯片没买

炸锅!美部长当众承认:中国一颗H200芯片没买

林子说事
2026-04-23 17:52:16
4月26日至29日南方地区将有强降雨过程 警惕次生灾害

4月26日至29日南方地区将有强降雨过程 警惕次生灾害

中国气象局
2026-04-24 20:31:14
以牙还牙,中国打响反制第一枪,一举切断美欧命脉,美欧坐立难安

以牙还牙,中国打响反制第一枪,一举切断美欧命脉,美欧坐立难安

凡知
2026-04-24 17:49:57
已失联十余日 48岁中国羽协主席被带走调查 曾蝉联奥运会混双金牌

已失联十余日 48岁中国羽协主席被带走调查 曾蝉联奥运会混双金牌

我爱英超
2026-04-24 23:18:47
从拜登曲线到弗吉尼亚公投逆转:民主党这次注定栽了

从拜登曲线到弗吉尼亚公投逆转:民主党这次注定栽了

斌闻天下
2026-04-24 07:10:03
广东91-93不敌福建 球员评价:4人优秀,8人低迷

广东91-93不敌福建 球员评价:4人优秀,8人低迷

篮球资讯达人
2026-04-24 21:36:08
离医院仅3公里男童被呛窒息死亡,家属:打120后21分钟才出车

离医院仅3公里男童被呛窒息死亡,家属:打120后21分钟才出车

朗威谈星座
2026-04-25 03:55:39
维埃拉:哲凯赖什在无球状态下非常努力,不知为什么没人传球

维埃拉:哲凯赖什在无球状态下非常努力,不知为什么没人传球

懂球帝
2026-04-25 03:58:14
12岁女童被父亲家暴致轻伤二级,不敢联系亲妈怕离婚时“不允许联系”的规定对母亲不利

12岁女童被父亲家暴致轻伤二级,不敢联系亲妈怕离婚时“不允许联系”的规定对母亲不利

观威海
2026-04-23 10:12:05
LG财阀内斗:百亿美元商业帝国争夺战,比韩剧还刺激

LG财阀内斗:百亿美元商业帝国争夺战,比韩剧还刺激

正解局
2026-04-24 14:57:24
CBA宣布离谱决定

CBA宣布离谱决定

宗介说体育
2026-04-24 09:57:42
2026-04-25 05:16:49
科技行者 incentive-icons
科技行者
科技正在如何变革商业世界
8130文章数 563关注度
往期回顾 全部

科技要闻

DeepSeek V4牵手华为,价格依然"屠夫级"

头条要闻

航班提前起飞10分钟 大学生把海航告了

头条要闻

航班提前起飞10分钟 大学生把海航告了

体育要闻

上海男篮23连胜+主场全胜 姚明之后最强一季

娱乐要闻

停工16个月!赵露思证实接拍新剧

财经要闻

LG财阀内斗:百亿美元商业帝国争夺战

汽车要闻

零跑Lafa5 Ultra北京车展上市:11.88-12.48万

态度原创

游戏
数码
健康
亲子
军事航空

《光与影:33号远征队》发售一周年 销量破800万

数码要闻

苹果继续拓展赛道!换帅后将进军新品类?

干细胞如何让烧烫伤皮肤"再生"?

亲子要闻

小狮子也只是个大宝宝呀,看到小朋友的车车满眼羡慕

军事要闻

美伊陷入互相封锁僵局

无障碍浏览 进入关怀版