蘋果公司近日為 visionOS 系統(tǒng)推送了 26.4 Beta 1 版本更新,此次升級引入了英偉達(dá) CloudXR 流媒體技術(shù)與“注視點流傳輸”(Foveated Streaming)兩大核心功能,同時支持“混合圖層渲染”開發(fā)框架,為 Apple Vision Pro 生態(tài)拓展開辟了新路徑。
英偉達(dá) CloudXR 技術(shù)基于 NVIDIA RTX 架構(gòu)構(gòu)建,通過云端服務(wù)器將高精度 VR/AR 內(nèi)容實時傳輸至便攜設(shè)備。這項技術(shù)可類比為“云游戲”模式在空間計算領(lǐng)域的應(yīng)用——用戶佩戴頭顯時,復(fù)雜圖形渲染由遠(yuǎn)程高性能顯卡完成,設(shè)備僅需接收視頻流并反饋交互指令。對于開發(fā)者而言,原生支持 CloudXR 協(xié)議意味著海量 PC VR 游戲與工業(yè)設(shè)計軟件無需大幅改造即可適配 Apple Vision Pro,顯著降低了跨平臺開發(fā)成本。
“注視點流傳輸”技術(shù)則聚焦于優(yōu)化云端串流效率。系統(tǒng)通過 Apple Vision Pro 的眼球追蹤模塊實時捕捉用戶視線焦點,在注視中心區(qū)域傳輸 4K 級高清畫面,而余光區(qū)域則動態(tài)降低分辨率。這種智能分配策略在保持視覺連貫性的同時,可將數(shù)據(jù)傳輸量減少 40% 以上,有效緩解網(wǎng)絡(luò)帶寬壓力,確保高速移動場景下的畫面流暢度。
更新中最具突破性的當(dāng)屬“混合圖層渲染”框架。開發(fā)者現(xiàn)在能夠自由組合本地渲染內(nèi)容與云端流媒體內(nèi)容,實現(xiàn)空間計算場景的分層構(gòu)建。例如在賽車游戲中,方向盤震動反饋、儀表盤數(shù)字變化等需要即時響應(yīng)的元素由設(shè)備端 RealityKit 引擎處理,而窗外動態(tài)光影、城市景觀等計算密集型場景則通過 CloudXR 實時傳輸;飛行模擬應(yīng)用中,駕駛艙儀表盤由本地芯片驅(qū)動保證清晰度,云端則負(fù)責(zé)渲染地表紋理與天氣變化。
技術(shù)文檔顯示,混合渲染模式支持多圖層獨立刷新率控制,本地內(nèi)容可達(dá) 90Hz 刷新率,云端流媒體則根據(jù)網(wǎng)絡(luò)狀況動態(tài)調(diào)整。這種分層架構(gòu)既發(fā)揮了設(shè)備端低延遲交互的優(yōu)勢,又借助云端算力突破了移動芯片的性能限制,為大型 3D 應(yīng)用在輕量化設(shè)備上的運行提供了新范式。









