虚实亮度兼顾新突破！上海交大感知驱动掩膜平衡技术破解 AR 透视显示难题

2026 年，上海交通大学联合奥地利格拉茨技术大学、日本奈良先端科学技术大学院、浙江科技大学团队在国际顶刊《IEEE Transactions on Visualization and Computer Graphics》发表重磅研究《Mask Balancing: Perception-Driven Dynamic Visibility Enhancement for Occlusion-Capable Optical See-Through Head-Mounted Displays》，提出掩膜平衡（Mask Balancing）创新方案，从偏振光路与人眼视觉感知双维度解决遮挡型光学透视 AR 头显（OC-OSTHMD）实景透光率过低的行业核心难题，为消费级、工业级 AR 眼镜落地扫清关键障碍。

一、行业核心痛点：像素级遮挡带来不可逆亮度损耗

具备虚实互遮挡能力的光学透视 AR 头显（OC-OSTHMD）是实现虚拟物体深度写实、贴合现实空间的核心设备，依靠空间光调制器（SLM）实现像素级画面遮挡，解决传统半透明 AR 虚拟图像 “悬浮虚影” 问题。但现有光学架构存在难以规避的透光短板：

1、为实现遮挡效果，实景光线需经过偏振处理，直接损失 50% 亮度；

2、SLM、偏振分束器（PBS）、光学合束镜等多层元件叠加衰减，理论最大透光率不足 20%，实际原型透光甚至低于 7%；

3、多次光路折返、偏振元件光谱损耗进一步压低环境亮度，室内暗光环境下实景画面严重发暗，干扰用户观察、操作，存在安全隐患。

过往解决方案仅聚焦硬件迭代，例如提升空间光调制器透光率、改用反射式 LCoS/DMD、探索光致变色材料等，但光学元件存在物理透光上限，且光致变色方案存在响应速度慢、像素遮挡精度不足等缺陷，无法从根源平衡虚实亮度冲突。如何在保留虚拟物体真实遮挡层次的同时，保障真实世界高可见度，成为下一代 AR 设备规模化商用的核心瓶颈。

二、技术创新：双偏振光路融合 + 感知驱动动态调控

上交大团队跳出单一硬件改良思路，提出掩膜平衡法，通过低成本偏振光路改造结合人眼感知量化模型，动态调配实景与虚拟画面透光比例，整套方案仅需在现有 OC-OSTHMD 基础上加装旋转线性偏振器（Balancing LP），兼容性强、改造成本低。

1. 双偏振光学融合架构

现实自然光经偏振分束器拆分为两路独立偏振光路，各司其职：

s 偏振遮挡光路（掩膜视觉）：完整经过原有 AR 光学系统，搭载 SLM 实现像素级虚实遮挡，提供具备空间层次感的虚拟画面，但存在严重光损耗；

p 偏振直通光路（原生实景视觉）：绕过全部遮挡光学组件，完整保留环境原始亮度，无额外光线衰减。

系统通过旋转模组调节线性偏振器与偏振分束器的交叉夹角 φ，精准控制两路实景光与虚拟图像光的透射占比，透射率满足公式：直通实景透光率\(T_{pass}=cos^2φ\)，遮挡实景与虚拟图像透光率\(T_{mask}/T_{image}=sin^2φ·T_{HMD}/T_{display}\)。夹角变化可实时切换画面权重：暗光环境抬高直通光路占比提亮实景；强光环境降低直通比例，强化虚拟物体对比度。

掩膜平衡光学原理示意图

2. 感知驱动实时调控系统

整套动态平衡逻辑依托眼动追踪 + 场景视觉分析双传感实时运行，全程贴合人类视觉感知规律，而非单纯依靠光学硬件参数计算：

实景可见度测算：场景相机采集实景画面，通过 Peli 对比度金字塔分解 7 级带通图像，选取 4.7cpd 中频带通的均方根（RMS）对比度作为评价指标，结合巴滕对比度敏感度函数（Barten CSF）、眼动相机捕捉的瞳孔直径，实时计算当前环境下人眼可识别实景的最低对比度阈值；若实景可见度不达标，系统自动调整偏振夹角提升直通光路亮度。

虚拟物体可见度测算：对虚拟模型做功率谱密度（PSD）分析，区分高频纹理模型（枫树、圣诞树）与低频简约模型（兔子、茶壶），采用韦伯对比度量化虚拟画面清晰度；团队通过两组人体实验标定感知阈值：识别虚拟纹理临界韦伯对比度 0.537，识别光影效果临界阈值 0.443。当虚拟画面对比度低于阈值时，系统自动抬高遮挡光路权重，强化虚拟物体质感。

实景带通对比度分解

虚拟物体功率谱密度分布

系统采用卡尔曼滤波平滑眼动相机采集的波动瞳孔数据，消除设备噪声干扰，保证不同光照切换时调节稳定流畅；整套算法以双线程并行运行，场景图像分析独立于主渲染线程，算力开销低，可适配主流 AR 实时渲染引擎。

三、人体感知实验：量化人眼视觉阈值，验证方案有效性

为建立精准的感知平衡基准，团队开展三组标准化用户实验，全部通过上海交通大学人体实验伦理审查，累计招募 36 名具备 AR / 图形学相关经验的受试者。

1、虚拟纹理感知实验（12 人）设置大、中、小三种尺寸文字纹理模拟不同空间频率虚拟物体，覆盖 4 档室内环境照度（29~626cd/m²）。结果显示：高频细小纹理需要更高对比度才能被人眼识别，中低频模型识别阈值差异极小；性别、AR 使用经验、瞳孔大小对感知阈值无显著影响，人群感知规律高度统一。

纹理实验设备

纹理感知箱线图

2、虚拟光影感知实验（24 人）对比带光影反射与无光影的成对虚拟模型（茶壶、机器人、圣诞树等），让受试者调节偏振夹角至两幅模型视觉无差异。实验证明光影自带高频细节，即便低频几何模型也能轻松分辨光影效果，空间频率对光影感知阈值无显著统计学差异。

光影实验虚拟模型

光影感知箱线图

3、多光照场景综合对比实验（12 人）搭建桌面原型，模拟四类真实场景照度：关灯室内（8cd/m²）、开灯室内（135cd/m²）、室外阴凉（287cd/m²）、室外强光（414cd/m²），将本方案（MB）、传统无遮挡 AR（AR）、静态遮挡头显（OC）三者做盲测对比。

• 暗光室内：传统 AR 占优（47%），本方案紧随其后（44%），传统遮挡设备仅 8%；

• 室内亮环境：本方案 42% 偏好度领先其余两种设备；

• 室外强光 / 阴凉场景：本方案偏好度分别达 58%、53%，大幅甩开传统方案；

• 整体综合评价：50% 受试者优先选择掩膜平衡系统，36% 选择传统遮挡头显，仅 14% 选择普通透视 AR。

多场景效果对比图

用户偏好占比表格

实拍画面直观印证：传统遮挡型 AR 在所有环境下实景画面严重发灰；普通无遮挡 AR 在户外强光下虚拟内容几乎消失；而掩膜平衡技术可自适应调配亮度，室内保留清晰实景，户外强光下虚拟物体纹理、光影完整保留，兼顾双向视觉体验。

四、应用价值与全行业范式转变
1. 多元落地场景

该技术突破不止面向消费级 AR 眼镜，在专业工业场景具备极强实用价值：

• 工业运维：设备检修时叠加图纸、标注，同时清晰看清实体机械结构；

• 医疗辅助：术中影像叠加、康复教学，兼顾人体真实视野与数字标注；

• 教育培训、车载导航、远程协同、建筑设计等场景，大幅提升复杂光照环境下 AR 设备可用性。

研究提出行业范式转变：过去 AR 光学设计仅以硬件透光率、分辨率等物理参数为核心优化目标，而本研究证明人类视觉感知是不可忽略的核心设计维度。团队此前研究已证实，人眼实际视觉感受与光学仪器测量数据存在明显偏差，单纯优化硬件无法实现最优视觉体验。感知驱动调控方案可突破光学硬件物理上限，在不牺牲设备体积、成本的前提下，同步提升虚实画面质量，兼顾用户视觉舒适与使用安全。

五、现存局限与未来研究方向

当前桌面原型仍存在可优化空间，团队规划后续迭代方向：

遮挡精度优化：实景提亮会带来轻微遮挡漏光，未来结合高亮度微型 OLED、色彩补偿算法、任务定向平衡策略（高精度建模场景优先保障虚拟遮挡）削弱该缺陷；

平滑亮度调节：现有偏振旋转速度较快，亮度突变易造成视觉不适，后续开发无感渐变调节算法；

双目适配原型：当前为单目设备，下一步搭建双目掩膜平衡系统，纳入双目视觉对比度感知模型；

自动物体频谱分类：实现虚拟物体高低频特征实时自动识别，无需人工预设感知阈值。

上海交大团队提出的掩膜平衡技术，依靠双偏振光路硬件改良与感知驱动动态平衡算法，解决了长期制约遮挡型透视 AR 普及的亮度矛盾。整套方案改造简单、适配现有主流 AR 光学架构，经过多组人体实验与多光照场景验证，可在室内暗光、户外强光等全场景下，同步提升真实环境可见度与虚拟物体真实质感。将视觉感知科学与近眼显示工程深度融合，这套技术开辟了下一代 AR 眼镜全新优化路线，为消费、工业、医疗等领域 AR 设备全天候落地提供可行解决方案，推动光学透视 AR 从实验室原型走向实用化产品。

点击图片可联系我们了解报告详情

马女士 Ms. Ceres

TEL：（+86）137-7604-9049

Email：CeresMa@cinno.com.cn

CINNO 公众号矩阵