EyeSight 是 Apple Vision Pro 最突出的功能,在头显表面形成人工透明结构,允许用户眼神交流。那么,该功能的工作原理是如何运行的呢?

如果第一次看到 Vision Pro 并且不熟悉 VR 技术,可能会认为 Vision Pro 正面是由一块透明玻璃制成的。实际上,就像任何其他 VR 头显一样,用户的眼睛隐藏在一层不透明的技术后面,包括显示器、镜头、传感器和芯片。

在 WWDC 2023 小组讨论中,Vision Pro 首席开发人员 Mike Rockwell 谈到了 Eyesight 背后的技术。

根据 Alex Heath 的说法,这个想法可以追溯到苹果前首席设计师 Jony Ive。这并不是全新的:Meta 在 2021 年展示了带有假视觉的原型,但没有在产品中实施该技术。

Eyesight 背后的秘密是外部显示屏,可以实时呈现头显用户的眼睛。

视力显示器是弯曲的,并使用透镜原理,这意味着用户从不同角度观察时会呈现不同的图像。传统的 2D 显示器会使眼睛看起来不自然,尤其是从侧面观察时。

Mick Rockwell 表示:“我们必须为每个人创建一个独立的视角。所以我们想出了一个透镜显示器,这是有史以来第一个弯曲的透镜显示器。我们实际上为每个观察 Vision Pro 外部显示屏的人呈现了独特视图。”

这些视图的数据从何而来?从 Rockwell 的陈述中,可以得出结论,有两个数据源:一方面,头显内部有四个眼动追踪摄像头拍摄的画面。另一方面,苹果使用数字角色,它是在佩戴者的 3D 面部扫描的帮助下预先生成的。从这些数据源中,以最小的延迟创建眼睛区域的数字图像,然后以不同的视角呈现。

由于此功能的技术复杂性(以及技术故障可能导致的怪异效果),媒体尚未能够在 Apple Vision Pro 的第一次动手实践中亲自试用 Eyesight。苹果可能仍在微调。

然而,一些专家表示,Eyesight 将有许多局限性,并且由于技术原因,预计眼部区域的图像会暗淡且分辨率相当低。

尽管如此,苹果坚信巨大的技术努力是值得的。因为苹果想要突破双方对 VR 头显的孤立,使得头显用户既能看到外部环境,又能让外界看到头显用户。

Eyesight 还包括自动淡入和淡出眼部区域的功能,具体取决于用户是沉浸在沉浸式内容中还是与附近的人互动。当有人靠近时,此人会自动出现在视野中。