蘋果研究團隊攜手香港大學,在3D渲染領域取得重大進展,共同推出名為LGTM的全新渲染框架。該框架全稱為“Less Gaussians, Texture More”,其核心創新在于將3D場景的幾何結構與表面紋理解耦,使系統在保持幾何形狀簡潔的同時,通過疊加紋理層實現4K級超高清畫質。
當前主流的“前饋3D高斯潑濺”技術雖能利用AI將2D圖片快速轉化為可多角度觀看的3D場景,但在處理高分辨率畫面時面臨嚴峻挑戰。隨著像素數量增加,算力需求呈指數級增長,導致設備難以承受如此巨大的計算壓力,畫面質量與流暢度因此受到影響。
為突破這一瓶頸,研究團隊采用分步策略構建LGTM框架。首先,模型從低分辨率圖像中學習場景結構,確保幾何框架在2K或4K渲染下保持穩定無破綻;隨后,引入第二個網絡專門處理外觀細節,將高分辨率紋理精準映射至幾何結構之上。這種分工模式有效避免了全鏈路高算力消耗,顯著提升了渲染效率。
對于普通用戶而言,這項技術將直接提升蘋果Vision Pro的使用體驗。該頭顯雙眼屏幕合計擁有約2300萬像素,單眼像素量甚至超過4K電視。在如此高的分辨率下,現有渲染技術極易遭遇性能瓶頸,導致畫面卡頓或模糊。而LGTM框架有望解決這一難題,為用戶帶來更流暢的沉浸式視覺體驗。
實際演示表明,接入LGTM框架后,生成的3D場景在紋理細節和文字清晰度上均有顯著提升。畫面效果已非常接近真實原圖,這意味著用戶在使用頭顯查看虛擬環境或進行透視體驗時,將獲得更加逼真、清晰的視覺感受。這一突破為3D渲染技術的發展開辟了新的路徑。










