2026 年，上海交通大學(xué)聯(lián)合奧地利格拉茨技術(shù)大學(xué)、日本奈良先端科學(xué)技術(shù)大學(xué)院、浙江科技大學(xué)團(tuán)隊(duì)在國(guó)際頂刊《IEEE Transactions on Visualization and Computer Graphics》發(fā)表重磅研究《Mask Balancing: Perception-Driven Dynamic Visibility Enhancement for Occlusion-Capable Optical See-Through Head-Mounted Displays》，提出掩膜平衡（Mask Balancing） 創(chuàng)新方案，從偏振光路與人眼視覺感知雙維度解決遮擋型光學(xué)透視 AR 頭顯（OC-OSTHMD）實(shí)景透光率過低的行業(yè)核心難題，為消費(fèi)級(jí)、工業(yè)級(jí) AR 眼鏡落地掃清關(guān)鍵障礙。
具備虛實(shí)互遮擋能力的光學(xué)透視 AR 頭顯（OC-OSTHMD）是實(shí)現(xiàn)虛擬物體深度寫實(shí)、貼合現(xiàn)實(shí)空間的核心設(shè)備，依靠空間光調(diào)制器（SLM）實(shí)現(xiàn)像素級(jí)畫面遮擋，解決傳統(tǒng)半透明 AR 虛擬圖像 “懸浮虛影” 問題。但現(xiàn)有光學(xué)架構(gòu)存在難以規(guī)避的透光短板：
1、為實(shí)現(xiàn)遮擋效果，實(shí)景光線需經(jīng)過偏振處理，直接損失 50% 亮度；
2、SLM、偏振分束器（PBS）、光學(xué)合束鏡等多層元件疊加衰減，理論最大透光率不足 20%，實(shí)際原型透光甚至低于 7%；
3、多次光路折返、偏振元件光譜損耗進(jìn)一步壓低環(huán)境亮度，室內(nèi)暗光環(huán)境下實(shí)景畫面嚴(yán)重發(fā)暗，干擾用戶觀察、操作，存在安全隱患。
過往解決方案僅聚焦硬件迭代，例如提升空間光調(diào)制器透光率、改用反射式 LCoS/DMD、探索光致變色材料等，但光學(xué)元件存在物理透光上限，且光致變色方案存在響應(yīng)速度慢、像素遮擋精度不足等缺陷，無(wú)法從根源平衡虛實(shí)亮度沖突。如何在保留虛擬物體真實(shí)遮擋層次的同時(shí)，保障真實(shí)世界高可見度，成為下一代 AR 設(shè)備規(guī)模化商用的核心瓶頸。
上交大團(tuán)隊(duì)跳出單一硬件改良思路，提出掩膜平衡法，通過低成本偏振光路改造結(jié)合人眼感知量化模型，動(dòng)態(tài)調(diào)配實(shí)景與虛擬畫面透光比例，整套方案僅需在現(xiàn)有 OC-OSTHMD 基礎(chǔ)上加裝旋轉(zhuǎn)線性偏振器（Balancing LP），兼容性強(qiáng)、改造成本低。
現(xiàn)實(shí)自然光經(jīng)偏振分束器拆分為兩路獨(dú)立偏振光路，各司其職：
s 偏振遮擋光路（掩膜視覺）：完整經(jīng)過原有 AR 光學(xué)系統(tǒng)，搭載 SLM 實(shí)現(xiàn)像素級(jí)虛實(shí)遮擋，提供具備空間層次感的虛擬畫面，但存在嚴(yán)重光損耗；
p 偏振直通光路（原生實(shí)景視覺）：繞過全部遮擋光學(xué)組件，完整保留環(huán)境原始亮度，無(wú)額外光線衰減。
系統(tǒng)通過旋轉(zhuǎn)模組調(diào)節(jié)線性偏振器與偏振分束器的交叉夾角 φ，精準(zhǔn)控制兩路實(shí)景光與虛擬圖像光的透射占比，透射率滿足公式：直通實(shí)景透光率\(T_{pass}=cos^2φ\(chéng))，遮擋實(shí)景與虛擬圖像透光率\(T_{mask}/T_{image}=sin^2φ·T_{HMD}/T_{display}\)。夾角變化可實(shí)時(shí)切換畫面權(quán)重：暗光環(huán)境抬高直通光路占比提亮實(shí)景；強(qiáng)光環(huán)境降低直通比例，強(qiáng)化虛擬物體對(duì)比度。
掩膜平衡光學(xué)原理示意圖
整套動(dòng)態(tài)平衡邏輯依托眼動(dòng)追蹤 + 場(chǎng)景視覺分析雙傳感實(shí)時(shí)運(yùn)行，全程貼合人類視覺感知規(guī)律，而非單純依靠光學(xué)硬件參數(shù)計(jì)算：
實(shí)景可見度測(cè)算：場(chǎng)景相機(jī)采集實(shí)景畫面，通過 Peli 對(duì)比度金字塔分解 7 級(jí)帶通圖像，選取 4.7cpd 中頻帶通的均方根（RMS）對(duì)比度作為評(píng)價(jià)指標(biāo)，結(jié)合巴滕對(duì)比度敏感度函數(shù)（Barten CSF）、眼動(dòng)相機(jī)捕捉的瞳孔直徑，實(shí)時(shí)計(jì)算當(dāng)前環(huán)境下人眼可識(shí)別實(shí)景的最低對(duì)比度閾值；若實(shí)景可見度不達(dá)標(biāo)，系統(tǒng)自動(dòng)調(diào)整偏振夾角提升直通光路亮度。
虛擬物體可見度測(cè)算：對(duì)虛擬模型做功率譜密度（PSD）分析，區(qū)分高頻紋理模型（楓樹、圣誕樹）與低頻簡(jiǎn)約模型（兔子、茶壺），采用韋伯對(duì)比度量化虛擬畫面清晰度；團(tuán)隊(duì)通過兩組人體實(shí)驗(yàn)標(biāo)定感知閾值：識(shí)別虛擬紋理臨界韋伯對(duì)比度 0.537，識(shí)別光影效果臨界閾值 0.443。當(dāng)虛擬畫面對(duì)比度低于閾值時(shí)，系統(tǒng)自動(dòng)抬高遮擋光路權(quán)重，強(qiáng)化虛擬物體質(zhì)感。
實(shí)景帶通對(duì)比度分解
虛擬物體功率譜密度分布
系統(tǒng)采用卡爾曼濾波平滑眼動(dòng)相機(jī)采集的波動(dòng)瞳孔數(shù)據(jù)，消除設(shè)備噪聲干擾，保證不同光照切換時(shí)調(diào)節(jié)穩(wěn)定流暢；整套算法以雙線程并行運(yùn)行，場(chǎng)景圖像分析獨(dú)立于主渲染線程，算力開銷低，可適配主流 AR 實(shí)時(shí)渲染引擎。
為建立精準(zhǔn)的感知平衡基準(zhǔn)，團(tuán)隊(duì)開展三組標(biāo)準(zhǔn)化用戶實(shí)驗(yàn)，全部通過上海交通大學(xué)人體實(shí)驗(yàn)倫理審查，累計(jì)招募 36 名具備 AR / 圖形學(xué)相關(guān)經(jīng)驗(yàn)的受試者。
1、虛擬紋理感知實(shí)驗(yàn)（12 人）設(shè)置大、中、小三種尺寸文字紋理模擬不同空間頻率虛擬物體，覆蓋 4 檔室內(nèi)環(huán)境照度（29~626cd/m2）。結(jié)果顯示：高頻細(xì)小紋理需要更高對(duì)比度才能被人眼識(shí)別，中低頻模型識(shí)別閾值差異極小；性別、AR 使用經(jīng)驗(yàn)、瞳孔大小對(duì)感知閾值無(wú)顯著影響，人群感知規(guī)律高度統(tǒng)一。
紋理實(shí)驗(yàn)設(shè)備
紋理感知箱線圖
2、虛擬光影感知實(shí)驗(yàn)（24 人）對(duì)比帶光影反射與無(wú)光影的成對(duì)虛擬模型（茶壺、機(jī)器人、圣誕樹等），讓受試者調(diào)節(jié)偏振夾角至兩幅模型視覺無(wú)差異。實(shí)驗(yàn)證明光影自帶高頻細(xì)節(jié)，即便低頻幾何模型也能輕松分辨光影效果，空間頻率對(duì)光影感知閾值無(wú)顯著統(tǒng)計(jì)學(xué)差異。
光影實(shí)驗(yàn)虛擬模型
光影感知箱線圖
3、多光照?qǐng)鼍熬C合對(duì)比實(shí)驗(yàn)（12 人）搭建桌面原型，模擬四類真實(shí)場(chǎng)景照度：關(guān)燈室內(nèi)（8cd/m2）、開燈室內(nèi)（135cd/m2）、室外陰涼（287cd/m2）、室外強(qiáng)光（414cd/m2），將本方案（MB）、傳統(tǒng)無(wú)遮擋 AR（AR）、靜態(tài)遮擋頭顯（OC）三者做盲測(cè)對(duì)比。
多場(chǎng)景效果對(duì)比圖
用戶偏好占比表格
實(shí)拍畫面直觀印證：傳統(tǒng)遮擋型 AR 在所有環(huán)境下實(shí)景畫面嚴(yán)重發(fā)灰；普通無(wú)遮擋 AR 在戶外強(qiáng)光下虛擬內(nèi)容幾乎消失；而掩膜平衡技術(shù)可自適應(yīng)調(diào)配亮度，室內(nèi)保留清晰實(shí)景，戶外強(qiáng)光下虛擬物體紋理、光影完整保留，兼顧雙向視覺體驗(yàn)。
該技術(shù)突破不止面向消費(fèi)級(jí) AR 眼鏡，在專業(yè)工業(yè)場(chǎng)景具備極強(qiáng)實(shí)用價(jià)值：
研究提出行業(yè)范式轉(zhuǎn)變：過去 AR 光學(xué)設(shè)計(jì)僅以硬件透光率、分辨率等物理參數(shù)為核心優(yōu)化目標(biāo)，而本研究證明人類視覺感知是不可忽略的核心設(shè)計(jì)維度。團(tuán)隊(duì)此前研究已證實(shí)，人眼實(shí)際視覺感受與光學(xué)儀器測(cè)量數(shù)據(jù)存在明顯偏差，單純優(yōu)化硬件無(wú)法實(shí)現(xiàn)最優(yōu)視覺體驗(yàn)。感知驅(qū)動(dòng)調(diào)控方案可突破光學(xué)硬件物理上限，在不犧牲設(shè)備體積、成本的前提下，同步提升虛實(shí)畫面質(zhì)量，兼顧用戶視覺舒適與使用安全。
當(dāng)前桌面原型仍存在可優(yōu)化空間，團(tuán)隊(duì)規(guī)劃后續(xù)迭代方向：
遮擋精度優(yōu)化：實(shí)景提亮?xí)磔p微遮擋漏光，未來結(jié)合高亮度微型 OLED、色彩補(bǔ)償算法、任務(wù)定向平衡策略（高精度建模場(chǎng)景優(yōu)先保障虛擬遮擋）削弱該缺陷；
平滑亮度調(diào)節(jié)：現(xiàn)有偏振旋轉(zhuǎn)速度較快，亮度突變易造成視覺不適，后續(xù)開發(fā)無(wú)感漸變調(diào)節(jié)算法；
雙目適配原型：當(dāng)前為單目設(shè)備，下一步搭建雙目掩膜平衡系統(tǒng)，納入雙目視覺對(duì)比度感知模型；
自動(dòng)物體頻譜分類：實(shí)現(xiàn)虛擬物體高低頻特征實(shí)時(shí)自動(dòng)識(shí)別，無(wú)需人工預(yù)設(shè)感知閾值。
上海交大團(tuán)隊(duì)提出的掩膜平衡技術(shù)，依靠雙偏振光路硬件改良與感知驅(qū)動(dòng)動(dòng)態(tài)平衡算法，解決了長(zhǎng)期制約遮擋型透視 AR 普及的亮度矛盾。整套方案改造簡(jiǎn)單、適配現(xiàn)有主流 AR 光學(xué)架構(gòu)，經(jīng)過多組人體實(shí)驗(yàn)與多光照?qǐng)鼍膀?yàn)證，可在室內(nèi)暗光、戶外強(qiáng)光等全場(chǎng)景下，同步提升真實(shí)環(huán)境可見度與虛擬物體真實(shí)質(zhì)感。將視覺感知科學(xué)與近眼顯示工程深度融合，這套技術(shù)開辟了下一代 AR 眼鏡全新優(yōu)化路線，為消費(fèi)、工業(yè)、醫(yī)療等領(lǐng)域 AR 設(shè)備全天候落地提供可行解決方案，推動(dòng)光學(xué)透視 AR 從實(shí)驗(yàn)室原型走向?qū)嵱没a(chǎn)品。
聯(lián)系我們
CINNO 公眾號(hào)矩陣
更多商務(wù)合作，歡迎與小編聯(lián)絡(luò)！
掃碼請(qǐng)備注：姓名+公司+職位
我是CINNO最強(qiáng)小編, 恭候您多時(shí)啦！
CINNO于2012年底創(chuàng)立于上海，是致力于推動(dòng)國(guó)內(nèi)電子信息與科技產(chǎn)業(yè)發(fā)展的國(guó)內(nèi)獨(dú)立第三方專業(yè)產(chǎn)業(yè)咨詢服務(wù)平臺(tái)。公司創(chuàng)辦十四年來，始終圍繞泛半導(dǎo)體產(chǎn)業(yè)鏈，在多維度為企業(yè)、政府、投資者提供權(quán)威而專業(yè)的咨詢服務(wù)，包括但不限于產(chǎn)業(yè)資訊、市場(chǎng)咨詢、盡職調(diào)查、項(xiàng)目可研、管理咨詢、投融資等方面，覆蓋企業(yè)成長(zhǎng)周期各階段核心利益訴求點(diǎn)，在顯示、半導(dǎo)體、消費(fèi)電子、智能制造及關(guān)鍵零組件等細(xì)分領(lǐng)域，積累了數(shù)百家中國(guó)大陸、中國(guó)臺(tái)灣、日本、韓國(guó)、歐美等高科技核心優(yōu)質(zhì)企業(yè)客戶。
