Meta早前撰文展示了利用光场技术实现无重投影VR透视的Flamera原型,亦即无法通过重投影来实现VR透视,从而解决重投影方法存在的视觉扭曲伪影。这款设备在Siggraph 2023大会引起了关注,并且荣获最佳展示奖。
日前,自由撰稿人马修·史密斯(Matthew S. Smith)日前撰文对Flamera进行了回顾介绍。
Meta最新的原型头显Flamera就像从科幻,它很快在Siggraph 2023上引起了人们的注意,在那里Flamera获得了梦寐以求的最佳展示奖。
这款Flamera头显有着大大的,会发出红色光芒的虫眼。它看起来与同类产品截然不同。但这种造型不为了夺人眼目,它采用了一种全新的透镜设计来解决VR头显支持混合现实的一个问题:透视,亦即通过前置摄像头为头显用户提供周围物理世界的视图。
Moor Insights & Strategy副总裁兼首席分析师安谢尔·萨格(Anshel Sag)表示:“我感觉不到MetaQuestPro的‘瞳游’效果。这绝对是我见过的质量最好的(混合现实)体验之一。”
‘睁大眼睛’看现实
由于物理原因,不可能将头显摄像头与用户眼睛精确地对齐在同一位置。这种位差曾导致我在使用头显时撞到墙壁和被椅子绊倒。像Meta Quest Pro这样的尖端头显可以通过从正确的角度重新投影视图来解决这个问题,但这又会导致视觉扭曲。这是指你在围绕透镜移动眼睛时图像出现扭曲,又称瞳游。
Meta的虫眼头显Flamera提供了一种新颖的解决方案。它抛弃了当前头显青睐的前置摄像头阵列,并采用独特的“光场透视”设计,将图像传感器与物理控制到达传感器的光线的孔径配对。这可以阻挡导致不正确视角的光线,并允许正确视角的光线到达传感器。
如果是单单直接通过透镜观察,结果就像是用笔在纸张戳出多个洞口并以这种方式浏览世界。但头显可以重新排列原始图像,从而消除间隙并重新定位传感器数据。一旦这个过程完成,系统就可以提供用户准确的物理世界视图。
萨格指出:“这显然依然只是一个原型,但图像质量和分辨率给我留下了深刻的印象。帧率同样不错。”
ModiFace的软件开发总监埃德加·莫库朗(Edgar Maucourant)同样体验了这款头显,并表示自己印象深刻:“没有延迟,眼睛所看到的手部位置和与手部实际所在的位置之间没有区别。”
莫库朗进一步指出,Flamera的准确性可能会为允许用户直接与周围世界交互的混合现实应用带来帮助。
Meta对苹果VisionPro的回应?
将这种透视MR设备与微软HoloLens和Magic Leap等光学MR设备进行比较非常重要。光学MR通过透明显示屏绕过了透视问题,用户的视觉不再受到阻碍。当微软HoloLens在2016年发布时,这种方法感觉像是未来,但它在显示质量、视场和亮度方面依然存在问题。
Meta的Quest Pro和苹果即将推出的Vision Pro突显了这一方向的转变。它们用非透明显示器来完全遮挡了用户的物理世界视图,并转而通过前置摄像头来提供视频透视体验。
Vision Pro对透视问题的解决方案更青睐于堆料。它采用了定制的视觉处理器R1芯片,并通过12个摄像头来计算校正视角(以及完成其他任务)。
Meta的Flamera则是主要通过透镜来校正视角。这大大降低了精确透视MR所需的计算能力。
但这并不是说Meta已经彻底破解了透视MR。Flamera距离商用依然存在很长的距离,而且与传统的透视MR相比存在一定的缺点。
萨格表示,这款头显的视场“相当有限”,并且注意到它的景深“不是连续的”,这意味着远处的对象看起来比实际距离更近。莫库朗则警告说,“色彩质量不太好”,而且这款头显的分辨率很低。
尽管如此,Flamera为透视MR指出了一个潜在的方向,而未来的MR最终会选择何种方案令人期待。