在Facebook Connect 2021大会上，马克·扎克伯格宣布公司更名为Meta，并展现了元宇宙的场景。其中，新推出的短焦VR一体机“Project Cambria”采用Pancake光学方案，拥有彩色的透视功能，将使VR设备不再仅仅是游戏机，而是变成生产力工具或效率工具，其应用场景将扩展至办公、会议等领域。
Cambria的出现标志着VR与AR技术的融合，将催生出新的应用场景。它将成为像电脑和手机一样的生产力工具，融入我们的日常生活，为生活、工作带来便利。例如，可以通过多屏办公进行远程协作，或是参加虚拟会议；在家也能体验线上沉浸式剧本杀；如果没时间去健身房，还能进行酣畅淋漓的VR运动。
要实现这些功能和应用场景，需要核心技术与算法支持。在佩戴方式方面，Cambria采用环形佩戴设计，与影创自研6DoF VR公版样机“骐骥”的设计理念相呼应。此外，Pancake光学方案可以使VR设备更加轻薄，便于长时间佩戴移动使用。而彩色See-through功能则允许用户在佩戴设备时看见高清晰度彩色真实世界，这对提高用户舒适度和增强移动性至关重要。
为了降低高分辨率RGB摄像头的物理延迟，我们利用空间扭曲等技术对画面进行预测及三维重构，以此填补帧带来的画面缺失。同时，该技术能够识别更多色彩，更精准地识别手势追踪和SLAM空间定位。
另外，对于手柄自追踪的问题，我们猜测Cambria新手柄可能采用自追踪模式，即安装有3个不同方向的相机用于视觉VIO跟踪定位。这可以提供更大自由度的交互体验，同时减少头显负担，使其更加轻便。此外，由于取消了红外LED灯环，可见光跟踪可以适应更复杂的光照环境，从而改善室外使用体验。
实现手柄自追踪需要较复杂算法和高性能芯片，但我们已经具备相关研究成果，如高性能、低消耗SLAM算法。对于三点统一问题，我们也有丰富经验可资借鉴。此外，当VR设备不再依赖手柄时，我们还需探索其他交互方式，如自然的手势识别技术，以确保用户操作无缝转换。
