蘋(píng)果研究團(tuán)隊(duì)攜手香港大學(xué)，共同推出了一項(xiàng)名為L(zhǎng)GTM的革命性3D渲染框架，為虛擬現(xiàn)實(shí)領(lǐng)域帶來(lái)了新的突破。這一創(chuàng)新成果旨在解決現(xiàn)有技術(shù)在處理高分辨率3D場(chǎng)景時(shí)面臨的算力瓶頸問(wèn)題。

傳統(tǒng)的前饋3D高斯?jié)姙R技術(shù)雖然能夠快速將2D圖像轉(zhuǎn)化為可多角度觀看的3D場(chǎng)景，但在處理4K及以上分辨率時(shí)，算力需求會(huì)隨像素?cái)?shù)量呈指數(shù)級(jí)增長(zhǎng)，導(dǎo)致設(shè)備性能難以承受。針對(duì)這一難題，LGTM框架通過(guò)解耦幾何結(jié)構(gòu)與表面紋理，實(shí)現(xiàn)了在保持簡(jiǎn)單幾何形狀的同時(shí)，疊加多層紋理以達(dá)成超高清畫(huà)質(zhì)。

研究團(tuán)隊(duì)采用分階段處理策略：首先利用低分辨率圖像訓(xùn)練模型掌握?qǐng)鼍敖Y(jié)構(gòu)，確保幾何框架在2K或4K渲染下保持穩(wěn)定；隨后通過(guò)獨(dú)立網(wǎng)絡(luò)處理外觀細(xì)節(jié)，將高分辨率紋理精準(zhǔn)映射到基礎(chǔ)結(jié)構(gòu)上。這種分工模式顯著降低了全鏈路計(jì)算負(fù)荷，有效避免了算力浪費(fèi)。

對(duì)于蘋(píng)果Vision Pro用戶(hù)而言，這項(xiàng)技術(shù)具有重要現(xiàn)實(shí)意義。該頭顯雙眼屏幕總像素達(dá)2300萬(wàn)，單眼分辨率超過(guò)4K電視標(biāo)準(zhǔn)?，F(xiàn)有渲染方案在此類(lèi)高密度顯示設(shè)備上常出現(xiàn)卡頓或模糊現(xiàn)象，而LGTM框架通過(guò)優(yōu)化算力分配，有望帶來(lái)更流暢的沉浸式體驗(yàn)。實(shí)際測(cè)試表明，應(yīng)用該技術(shù)后生成的3D場(chǎng)景在紋理細(xì)節(jié)和文字清晰度方面均有顯著提升，視覺(jué)效果接近原始圖像質(zhì)量。