在苹果 WWDC23 推出其 Vision Pro 空间计算头显期间,技术开发集团副总裁 Mike Rockwell 上台描述了新设备背后的关键组件。在 Rockwell 介绍新 visionOS 的片段中,他指出了操作系统的 Foveated Renderer。他在新的动态注视点渲染管线中指出,每帧都能准确地到达你眼睛寻找的每一帧位置,从而提供最高的图像质量。

近日,美国专利商标局公布了苹果公司一项与动态注视点渲染相关的苹果专利,该专利申请涉及实现渲染过程的设备、系统和方法,这些渲染过程基于眼球追踪数据,将图像分成高分辨率和低分辨率区域的流程,重点描述了注视点渲染技术在矢量图形透视校正流程上的应用。

在一些实现中,其专利申请中公开的技术可以在具有光学透视或不透明显示器的头戴式设备(HMD)上实现。

XR 系统可以检测头部运动,并作为响应,调整图形内容和呈现给人的声场,其方式类似于这些视图和声音在物理环境中的变化方式。

苹果的专利涵盖了执行渲染过程的设备、系统和方法,该过程使用从源接收的内容执行注视点文本渲染。例如,应用程序将在移动设备屏幕上显示的内容可以在 3D 环境中的某个位置使用平面虚拟表面显示。渲染过程可以通过根据注视方向绘制区域来提供注视点渲染(例如,仅绘制某些区域,以更高的分辨率/更高的帧速率绘制某些区域等)。在某些实现中,渲染过程提高了焦点区域的质量和/或减少了用于提供透视正确渲染的计算和内存量。

苹果专利图 1 说明了电子设备在提供 XR 环境中提供的左眼和右眼立体图像;专利图 2D 说明了注视点渲染的用户界面 #210 绕 x 轴和 y 轴旋转。例如,当虚拟显示表面相对于电子设备以相对近的距离和倾斜的方向定位时,可能会发生这种渲染。