苹果研究团队携手香港大学,在3D渲染领域取得重大进展,共同推出名为LGTM的全新渲染框架。该框架全称为“Less Gaussians, Texture More”,其核心创新在于将3D场景的几何结构与表面纹理解耦,使系统在保持几何形状简洁的同时,通过叠加纹理层实现4K级超高清画质。
当前主流的“前馈3D高斯泼溅”技术虽能利用AI将2D图片快速转化为可多角度观看的3D场景,但在处理高分辨率画面时面临严峻挑战。随着像素数量增加,算力需求呈指数级增长,导致设备难以承受如此巨大的计算压力,画面质量与流畅度因此受到影响。
为突破这一瓶颈,研究团队采用分步策略构建LGTM框架。首先,模型从低分辨率图像中学习场景结构,确保几何框架在2K或4K渲染下保持稳定无破绽;随后,引入第二个网络专门处理外观细节,将高分辨率纹理精准映射至几何结构之上。这种分工模式有效避免了全链路高算力消耗,显著提升了渲染效率。
对于普通用户而言,这项技术将直接提升苹果Vision Pro的使用体验。该头显双眼屏幕合计拥有约2300万像素,单眼像素量甚至超过4K电视。在如此高的分辨率下,现有渲染技术极易遭遇性能瓶颈,导致画面卡顿或模糊。而LGTM框架有望解决这一难题,为用户带来更流畅的沉浸式视觉体验。
实际演示表明,接入LGTM框架后,生成的3D场景在纹理细节和文字清晰度上均有显著提升。画面效果已非常接近真实原图,这意味着用户在使用头显查看虚拟环境或进行透视体验时,将获得更加逼真、清晰的视觉感受。这一突破为3D渲染技术的发展开辟了新的路径。










