上海AI实验室发布P1-VL：首个能看懂物理图像并解题的AI模型

这项由上海AI实验室领导的突破性研究发表于2026年2月，论文编号为arXiv:2602.09443v1。研究团队开发出了名为P1-VL的视觉语言模型家族，这是首个能够真正"看懂"物理图像并进行科学推理的开源AI系统。

在人工智能的发展历程中，让机器真正理解物理世界一直是一个巨大挑战。就像教会一个从未见过真实世界的孩子解决复杂的物理问题一样困难。以往的AI模型虽然能处理文字描述的物理题目，但一旦遇到包含图表、电路图或实验装置图的题目就束手无策了。这就好比一个盲人试图解决需要观察气泡运动轨迹的流体力学问题——无论文字描述多么详细，缺少视觉信息就无法得出正确答案。

P1-VL模型的出现彻底改变了这种局面。研究团队将这个AI系统送上了国际物理奥林匹克竞赛的舞台，结果令人震撼：在13场2024-2025年度的国际物理竞赛中，P1-VL-235B-A22B模型获得了12枚金牌和1枚银牌，成为首个在物理奥赛中表现如此出色的开源视觉语言模型。更令人惊喜的是，当配合PhysicsMinions智能助手系统时，这个AI甚至能排到全球第二名，仅次于谷歌的Gemini-3-Pro系统。

一、突破视觉与逻辑的鸿沟

传统的物理解题方式就像只用一只眼睛看世界。大多数AI模型只能处理纯文字的物理问题，但真实的物理世界充满了需要视觉理解的情境。在国际物理奥赛中，许多题目都包含关键的视觉元素：电路拓扑图显示了电流的流向，力学图展示了物体的受力情况，光学图描绘了光线的传播路径。这些图像不仅仅是装饰，它们包含着解题的核心信息。

以2025年国际物理奥赛的一道题目为例，题目要求分析香槟中气泡的运动。学生需要直接从照片中测量气泡的半径，观察气泡的上升速度，然后结合物理定律计算相关参数。这类题目完美地模拟了真实科学研究中的情况——科学家们需要从实验数据和观测图像中提取信息，然后运用理论知识进行分析。

P1-VL模型就像给AI装上了一双"物理学家的眼睛"。它不仅能够识别图像中的各种物理元素，更重要的是能够理解这些视觉信息与物理定律之间的关系。当看到一张显示电路连接的图片时，它能够识别出电阻、电容和电源的位置，理解电路的拓扑结构，然后运用基尔霍夫定律进行计算。当观察一张显示物体运动轨迹的图片时，它能够分析运动的特征，识别关键的几何约束，然后应用牛顿定律求解问题。

这种能力的实现并不简单。研究团队需要解决一个根本性挑战：如何让AI模型将视觉感知与抽象的物理推理紧密结合。这就像教会一个学生不仅要会看图，还要会从图中"读出"隐藏的物理规律。P1-VL通过先进的视觉编码器提取图像特征，然后将这些特征与语言模型的推理能力结合，形成了一个能够进行多模态物理推理的统一系统。

二、课程式强化学习的训练奇迹

训练P1-VL就像培养一个物理天才的过程。研究团队没有采用传统的"题海战术"，而是设计了一套精巧的"课程式强化学习"方法，就像一个经验丰富的物理老师循序渐进地教导学生。

这个训练过程可以想象成这样的场景：刚开始时，AI学生只能解决相对简单的物理问题，比如基本的力学计算或简单的电路分析。随着学习的深入，老师逐渐增加题目的难度，引入更复杂的概念和更具挑战性的问题。但这里有个关键的创新点——每当AI学生掌握了当前难度级别的知识后，系统会自动调整学习策略，不仅增加题目难度，还会扩大搜索空间，给AI更多时间思考更复杂的问题。

研究团队发现，直接让AI挑战最难的题目往往会导致训练失败，就像让小学生直接做高考物理题一样。因此，他们设计了一个三阶段的训练流程。第一阶段，AI学习解决那些成功率在0到70%之间的问题，这些是具有一定挑战性但又不至于完全无法解决的题目。第二阶段，成功率门槛降低到50%，意味着题目变得更加困难。第三阶段，AI要挑战那些成功率在50%以下的超高难度问题。

更有趣的是，随着训练的进行，AI的"思考"过程也在发生变化。研究团队观察到，AI产生的答案越来越长，这表明它正在进行更深层次的推理。就像一个学生从简单的一步计算发展到能够进行复杂的多步推理一样，P1-VL学会了用更详细的步骤来解决复杂问题。为了配合这种变化，训练系统会自动扩大AI的"思考空间"——增加生成窗口和群组大小，给AI足够的时间和空间进行深度推理。

强化学习的奖励机制设计得非常巧妙。就像考试评分一样，系统会检查AI的最终答案是否正确。但与传统考试不同的是，这里的"考试"是完全自动化的，使用符号计算库来验证数学表达式的正确性，并结合专门的语言模型来评估推理过程的合理性。这种双重验证机制确保AI不仅能得出正确答案，还能通过合理的推理路径到达答案。

三、智能助手系统的协同作战

P1-VL的真正威力在于它能够与PhysicsMinions智能助手系统协同工作，就像组建了一个专业的物理解题团队。这个系统包含三个专门的"工作室"：视觉工作室、逻辑工作室和评审工作室，每个工作室都有自己的专长。

视觉工作室就像团队中的"观察员"，专门负责处理和分析图像信息。当遇到包含图表、电路图或实验装置图的题目时，视觉工作室会仔细分析这些视觉元素，将它们转换成符号化的表示形式。比如，当看到一个电路图时，它会识别出各个元件的类型和连接方式，然后用标准的电路符号来表示这些信息。

逻辑工作室则扮演"思考者"的角色，负责生成和改进解题方案。它会运用各种物理定律和数学方法来构建解题思路，并通过内部的"自我反省"机制不断优化答案。就像一个学生在草稿纸上反复修改计算过程一样，逻辑工作室会多次检查自己的推理过程，确保逻辑的严密性。

评审工作室则是团队的"质量控制员"，负责验证解题过程和最终答案的正确性。它会使用专门的物理知识和通用的推理规则来检查解题方案，就像一个经验丰富的物理老师检查学生作业一样。

这三个工作室之间形成了一个紧密的协作循环。视觉工作室提供准确的视觉信息，逻辑工作室基于这些信息进行推理，评审工作室检验推理的正确性，如果发现问题就反馈给逻辑工作室进行修正。这种多轮协作机制大大提高了解题的准确性和可靠性。

特别值得一提的是，这个助手系统还具有跨学科适应能力。虽然最初是为物理问题设计的，但它能够自动识别题目所属的学科领域，然后调用相应的专门知识和验证规则。在处理化学问题时，它会调用化学验证器；处理生物问题时，它会使用生物学的评判标准。这种自适应机制使得整个系统具有了跨学科的解题能力。

四、数据集的精心构建

构建P1-VL的训练数据集就像编写一本全面的物理百科全书。研究团队收集了8033个精心挑选的物理问题，这些问题来源于世界各地的物理奥林匹克竞赛、权威教科书和竞赛指导书。每个问题都经过了严格的筛选和验证，确保既具有足够的挑战性，又能够通过规则化的方式进行验证。

数据集的构成体现了精心的平衡设计。其中51%的问题来自各种物理奥赛，49%来自教科书。这种比例确保了AI既能学会解决高难度的竞赛题目，又能掌握基础的物理概念和方法。从学科分布来看，力学问题占44.6%，电磁学占22.5%，热力学占14.1%，现代物理占10.0%，光学占8.8%。这种分布基本反映了物理学各分支的相对重要性。

数据集中的问题类型也非常丰富。从答案形式来看，26.4%需要给出数学表达式，23.4%需要计算数值，27.6%需要推导方程，21.9%是选择题，还有少量需要给出不等式。这种多样性确保AI能够应对各种不同的解题要求。

更重要的是，68.6%的问题包含图像信息，这些图像不仅仅是装饰性的插图，而是解题所必需的关键信息。研究团队将这些图像分为三类：说明性图像（只是帮助理解题意），变量图像（包含需要从图中读取的参数），和数据图像（包含需要分析的实验数据或图表）。这种分类帮助AI学会识别不同类型图像的作用，并采用相应的处理策略。

数据质量控制过程极其严格，就像出版社编辑一本重要教科书一样细致。每个问题都要经过多个验证步骤：首先使用光学字符识别技术处理扫描的题目，然后人工校对确保文字准确；接着用三个不同的AI模型独立提取答案，只有至少两个模型给出相同结果的题目才会被保留；然后筛除那些需要画图或包含无法验证答案的开放性问题；使用专门的AI模型检查题目文字与图像的一致性，确保没有缺失的图像；最后由专家进行人工审查，进行最终的质量把关。

通过这个严格的筛选过程，最初收集的13432个问题最终精选出8033个高质量问题，形成了一个既具有挑战性又能够进行可靠训练的数据集。

五、模型架构的巧妙设计

P1-VL的设计就像建造一座连接视觉世界和抽象思维的桥梁。整个系统建立在现有的先进视觉语言模型基础上，包括Qwen3-VL-30B-A3B和Qwen3-VL-235B-A22B，但通过专门的物理推理训练获得了独特的能力。

模型的工作原理可以这样理解：当遇到一个物理问题时，视觉编码器首先分析图像，提取出各种视觉特征，比如物体的形状、位置、运动轨迹等。然后，这些视觉特征被转换成特殊的数字表示，与问题的文字描述一起输入到语言模型中。语言模型不仅要理解文字内容，还要整合视觉信息，形成对整个问题的全面理解。

为了适应物理问题的特殊需求，研究团队对训练过程进行了专门的优化。他们发现，在训练过程中冻结视觉编码器的参数，只训练语言模型部分，能够取得更好的效果。这就像在学习新技能时，先保持已有的视觉能力不变，专注于提升逻辑推理能力。

模型的输出格式也经过了特别设计。所有答案都要求使用LaTeX格式表示数学公式，最终答案必须放在特殊的框框中，如果问题需要多个答案，每个答案都要单独装框。这种标准化的输出格式不仅便于自动验证，也符合科学写作的规范。

训练过程中的一个重要创新是解决了"训练-推理不匹配"的问题。在实际训练时，AI使用一种计算框架；但在最终测试时，可能使用另一种不同的计算框架。这种差异会导致微小的数值误差，进而影响训练效果。研究团队开发了"序列级掩码重要性采样"技术，就像给训练过程加上了一个"稳定器"，确保训练过程的稳定性和可靠性。

六、令人瞩目的实验结果

P1-VL在HiPhO物理奥赛基准测试中的表现可以用"令人震撼"来形容。这个基准测试包含了13场2024-2025年度的重要物理竞赛，涵盖了国际物理奥林匹克（IPhO）、亚洲物理奥林匹克（APhO）、欧洲物理奥林匹克（EuPhO）等顶级赛事。

P1-VL-235B-A22B模型的表现堪称历史性突破。在13场竞赛中，它获得了12枚金牌和1枚银牌，平均分达到39.3分。这个成绩不仅在开源模型中独占鳌头，甚至超越了许多知名的商业闭源模型，包括Gemini-2.5-Pro、GPT-5和Grok-4等。更令人印象深刻的是，这个AI模型的单独表现就超过了配备智能助手系统的文本模型P1-235B-A22B+PhysicsMinions，证明了真正的视觉理解能力确实能够超越纯粹的智能辅助系统。

即使是较小规模的P1-VL-30B-A3B模型也表现出色，获得了9枚金牌和4枚银牌，平均分35.0分。这个成绩在开源模型中排名第三，仅次于DeepSeek-V3.2-Thinking和P1-235B-A22B。考虑到这个模型的参数规模相对较小，这样的表现展现了出色的参数效率。

当P1-VL与PhysicsMinions智能助手系统结合时，效果更加惊人。P1-VL-235B-A22B+PhysicsMinions的平均分提升到40.9分，在全球排名中跃升至第二位，仅次于谷歌的Gemini-3-Pro系统。在一些具体的竞赛中，这个组合甚至创造了新的最高分记录，包括2025年泛美物理奥赛（66.5分对66.3分）、2024年泛美物理奥赛（83.3分对82.5分）和2024年泛美力学竞赛（84.8分对82.3分）。

这些成绩的意义远远超出了简单的数字比较。它们证明了AI系统已经能够在需要深度科学推理的任务中与人类顶尖选手竞争，而且这种能力是通过理解和整合多模态信息实现的，而不是简单的模式匹配或记忆复现。

七、跨学科的出色表现

P1-VL的能力并不局限于物理学领域。在FrontierScience-Olympiad跨学科基准测试中，这个原本为物理问题设计的AI系统展现了令人惊讶的通用性。这个测试涵盖生物学、化学和物理学三个学科，P1-VL-235B-A22B在所有三个学科中都获得了显著的性能提升，总分比基础模型提高了8.0分，P1-VL-30B-A3B的提升幅度更是达到了9.1分。

更有趣的是，即使在这个纯文本的基准测试中，多模态的P1-VL-235B-A22B仍然比其纯文本版本的兄弟模型P1-235B-A22B高出2.3分。这表明，通过多模态训练获得的推理能力能够迁移到纯文本任务中，就像一个学会了看图解题的学生，在处理纯文字问题时也变得更加敏锐。

当配合PhysicsMinions智能助手系统时，P1-VL-235B-A22B+PhysicsMinions在跨学科测试中获得了67.1分的总分，在所有参与测试的开源模型中排名第一。这个成绩证明了系统的自适应能力——它能够自动识别问题所属的学科领域，然后调用相应的专门知识和验证规则进行处理。

在更广泛的基准测试中，P1-VL模型同样表现出色。在十个STEM相关的文本基准测试中，包括AIME24、AIME25、IMO-AnswerBench、AMOBench等高难度数学竞赛题目，两个P1-VL模型都持续超越了它们的基础模型。在多模态STEM推理任务中，比如需要处理复杂图表和多图像信息的EMMA-Mini基准测试，P1-VL-235B-A22B和P1-VL-30B-A3B分别取得了1.7分和3.4分的提升。

这种跨领域的优秀表现验证了一个重要的观点：通过在一个具有挑战性的领域（如物理奥赛）进行深度训练，AI模型能够获得更强的通用推理能力，这些能力可以迁移到其他相关领域。这就像一个经过严格物理训练的学生，在处理其他科学问题时也会表现得更加出色。

八、技术创新的深层价值

P1-VL的成功不仅仅在于它在竞赛中的优异表现，更重要的是它所代表的技术突破和创新理念。研究团队解决了几个关键的技术挑战，这些解决方案对整个人工智能领域都具有重要意义。

首先是多模态信息融合的突破。传统的AI系统要么专注于文本，要么专注于图像，很难将两者有效结合。P1-VL证明了通过精心设计的训练策略，AI系统可以学会将视觉感知与抽象推理紧密结合。这种能力对于构建真正理解物理世界的AI系统至关重要。

其次是课程式学习策略的创新。研究团队发现，简单地增加数据量或模型规模并不能解决复杂推理问题，关键在于如何安排学习的顺序和难度。他们的三阶段训练策略，配合动态的搜索空间扩展机制，为训练高性能推理模型提供了新的范式。

训练稳定性的解决方案也具有重要价值。"序列级掩码重要性采样"技术解决了强化学习训练中的一个普遍问题——训练和推理环境的不匹配。这个技术不仅适用于物理问题，也可以推广到其他需要强化学习的任务中。

验证机制的设计同样值得关注。研究团队开发了混合验证框架，结合了基于规则的符号计算验证和基于模型的语义验证。这种双重验证机制既确保了答案的数学正确性，又保证了推理过程的合理性。这种方法为评估AI系统的科学推理能力提供了新的标准。

智能助手系统的设计理念也具有深远影响。通过将复杂任务分解为专门的子模块，每个模块专注于自己的专长，然后通过协作机制整合各模块的能力，这种设计思路可以应用到许多其他复杂的AI任务中。

九、未来应用的广阔前景

P1-VL的成功为人工智能在科学研究和教育领域的应用开辟了新的可能性。这项技术的潜在应用场景非常广泛，每一个都可能对相关领域产生深远影响。

在科学教育领域，P1-VL可以成为一个强大的教学助手。它不仅能够解答学生的物理问题，还能详细解释解题过程，特别是如何从图像中提取关键信息并将其与物理定律结合。这种能力对于培养学生的科学思维和解题技巧具有重要价值。传统的教学中，老师很难为每个学生提供个性化的指导，而AI助教可以根据每个学生的具体问题提供针对性的帮助。

在科学研究方面，P1-VL展现的多模态理解能力为自动化科学发现开辟了新路径。科学研究中经常需要从实验数据、图表、显微镜图像等视觉信息中提取规律，然后结合理论知识进行分析。P1-VL的成功表明，AI系统有望在这个过程中发挥重要作用，协助科学家处理大量的实验数据，发现人类可能忽视的规律和模式。

在工程应用领域，这种技术可以帮助分析复杂的工程图纸、电路设计和机械结构。工程师经常需要根据技术图纸理解设备的工作原理，识别潜在的问题，或者优化设计方案。具备视觉理解和物理推理能力的AI系统可以大大提高这些工作的效率和准确性。

在自动化实验和机器人领域，P1-VL的技术也具有重要价值。机器人如果要在真实世界中执行复杂任务，就必须理解物理环境，预测物体的行为，并根据物理定律规划行动。P1-VL展示的将视觉感知与物理推理结合的能力，为开发更智能的机器人系统提供了技术基础。

更进一步，这项技术还可能推动科学发现的自动化。设想一个AI系统能够自动分析实验数据，识别异常现象，提出假设，设计验证实验，这将大大加速科学研究的进程。虽然这样的系统还需要更多的技术突破，但P1-VL已经迈出了重要的第一步。

说到底，P1-VL的意义远远超出了在物理竞赛中获得好成绩。它代表了人工智能向真正理解物理世界迈进的重要一步。正如研究团队所说，掌握严格的物理约束是实现机器科学发现和可靠的具身AI的必要前提。就像科学家需要理论指导，机器人需要世界模型一样，未来的AI系统必须首先在受控环境中掌握物理定律。

这项研究的开源性质也值得特别赞扬。通过将P1-VL模型公开发布，研究团队为整个科学界提供了一个强大的工具和研究平台。这种开放的态度将推动更多研究者在这个基础上进行创新，加速相关技术的发展和应用。

归根结底，P1-VL不仅仅是一个能够解决物理题目的AI系统，它更代表了人工智能发展的一个新阶段——从处理符号信息转向理解物理世界，从单纯的模式识别转向真正的科学推理。这种转变将为构建能够理解和操作物理世界的AI系统奠定坚实基础，最终实现人工智能在科学发现和现实应用中的重大突破。

有兴趣深入了解这项突破性研究的读者，可以通过arXiv:2602.09443v1查阅完整的论文内容，其中包含了更多技术细节和实验数据。

Q&A

Q1：P1-VL模型与传统AI有什么不同？

A：P1-VL最大的不同在于它能同时"看懂"图像和进行科学推理。传统AI要么只能处理文字，要么只能识别图片，但P1-VL能够从物理图像中提取关键信息，然后结合物理定律进行复杂的科学计算，就像给AI装上了"物理学家的眼睛"。

Q2：P1-VL在物理奥赛中的表现如何？

A：P1-VL在13场国际物理竞赛中获得了12枚金牌和1枚银牌，成为首个在物理奥赛中表现如此出色的开源AI模型，甚至超越了许多知名的商业模型。当配合智能助手系统时，它的全球排名达到第二位。

Q3：普通人能使用P1-VL吗？

A：目前P1-VL作为开源模型已经发布，研究人员和开发者可以免费使用。但对于普通用户来说，可能需要等待基于这项技术开发的具体应用产品，比如智能教学助手或在线解题工具等。