蘋果研究團隊與香港大學聯合發布了一項突破性成果——全新渲染框架LGTM(Less Gaussians, Texture More),旨在解決高分辨率3D場景渲染中的算力瓶頸問題。這一技術通過解耦幾何結構與表面紋理,為虛擬現實設備帶來畫質與性能的雙重提升。
傳統渲染技術如“前饋3D高斯潑濺”雖能快速將2D圖像轉化為3D場景,但在處理4K及以上分辨率時,算力需求隨像素數量呈指數級增長,導致設備難以流暢運行。例如,蘋果Vision Pro頭顯雙眼總像素達2300萬,單眼分辨率超過4K電視,現有技術在此類設備上極易出現畫面卡頓或模糊。
LGTM框架采用分階段處理策略:首先通過低分辨率圖像訓練模型,構建精確的幾何結構框架,確保其在高分辨率渲染下保持穩定;隨后引入獨立網絡處理外觀細節,將高分辨率紋理無縫映射至幾何模型。這種分工模式大幅降低了全鏈路計算負擔,使4K級渲染成為可能。
實際測試顯示,接入LGTM框架后,3D場景的紋理細節與文字清晰度顯著提升,畫面效果接近原始圖像。對于Vision Pro用戶而言,這意味著虛擬環境查看與透視功能將獲得更逼真的視覺體驗,有效解決了高分辨率設備面臨的性能與畫質矛盾。










