VR头盔透视技术帮助MR发展
- VR头显的透明技术可以使早期的MR体验成为可能，也有助于开发MR应用所必需的生态系统。
- 深度感知在磁共振应用中是必不可少的，以演示闭塞现象。目前的VR VST质量勉强足够，因为它是通过摄像头实现的。然而，这可以通过加入额外的ToF传感器来改善。
- 未来将会有更多带有VST的VR头显，促进MR应用数量的增加．
虚拟现实(VR)头戴设备使用实时六自由度(DOF)和视觉同步定位和映射(SLAM)来接收现实世界的信息，如3D坐标和物体识别。最初，该技术被用于手部跟踪和监护系统。尽管如此，一些VR头戴设备整合了来自单色摄像头的图像，并出人意料地将视频透视(VST)的功能扩展到混合现实(MR)。Meta推出了Quest Pro VR而字节跳动的PICO4则配备了全彩摄像头，以提供更逼真的MR应用。
目前VR头显中使用的透明技术被称为VST，而在增强现实(AR)器件被称为光学透视(OST)。VST技术将现实世界的数字化三维视图与计算机生成的现实模拟融合在一起，然后在不透明显示器上显示。通过使用VST以及适当的渲染技术和算法，可以实现虚拟对象和实际对象之间的交互和遮挡，以及重建物理世界的数字三维模型。
与通过摄像头获得透视功能的VR头盔不同，AR设备具有透视功能。AR设备的OST功能允许虚拟图像直接叠加在现实世界的视觉上。AR设备中真实世界图像的分辨率明显高于VR头盔。然而，目前的AR设备允许与真实环境的交互相当有限，因为在没有深度传感器的情况下无法实现遮挡。
VR VST的优点
VR VST技术允许用户无需摘掉VR头显，就可以通过物理键盘、鼠标、触摸板或控制器与环境进行交互。它甚至能够在虚拟世界中创造昂贵的小工具，比如多个显示器。展望未来，更多实验性的AR和MR功能可能会集成到VR头盔中，极大地丰富这类设备的生态系统和实用性。
VR VST目前面临的挑战
- 对于mr来说，立体视觉和深度感知都是至关重要的。在未来，配备飞行时间(ToF)传感器的VR头戴设备将能够比现有的配备摄像头的头戴设备捕捉更准确的距离信息。
- VR头显的VST勉强达到双目视觉。其中一个原因是VR VST只有一个摄像头，这使得测量近距离物体的距离变得困难。此外，视场对象仍然会有扭曲和扭曲。未来的算法必须改进这一点，否则设计师需要避免让用户感知位置更近的物品。此外，更多的颜色和白平衡传感器将需要做出更真实的近似实际的颜色。
- VST技术是一种新颖的虚拟现实应用，通过创建多个虚拟显示器，将多个显示器带入虚拟世界。然而，目前VR头盔中的虚拟显示器的分辨率低于现实世界中的显示器。然而，这个问题可以通过增加VR头盔上显示器的分辨率来解决，尽管这会花费更多。
- 延迟是VST VR头盔的一个关键特征，因为处理器必须对摄像头捕捉到的图像进行编码。因此，处理器的速度和带宽将影响VR系统的性能，因为未来的中高端VR头戴设备一般都将支持4K视频流。因此，VR头显SoC的要求应该高于智能手机。
结论
VR头盔中的VST技术可以模糊VR和AR之间的界限，使VR提供MR功能成为可能。MR除了游戏外，还有很多用途。它可以用于学习平台、运动目的、网络研讨会和制造业的数字双胞胎。虽然VR VST仍有一些问题需要解决，但它可以降低MR应用的进入门槛。越来越多的用户和开发者采用VR头盔VST技术，这将有助于创造更多MR应用程序。反过来，这些MR应用程序将推动AR硬件和生态系统的发展。毕竟AR设备具有某些VR设备无法复制的优势。
相关的帖子
