虚拟现实技术，增强现实技术（AR）和混合现实技术（MR）的强大功能使人们能够进行协作，无论之间有何距离，都可以使用应用程序参与各种活动。在与技术人员一起维修设备的远程协助示例中，Fraunhofer HHI正在开发的技术可以支持维修输入，这包括对技术人员周围的手部动作和反馈，根据情况提供更多的应用。

　　“Fraunhofer HHI开发的解决方案可以实时和高质量地将虚拟世界与现实世界联系起来，并开辟新的视角或合作关系。”Fraunhofer HHI项目经理Paul Chojecki解释说。“该解决方案可以更灵活地适应用户的身高并增加沉浸感。同时，它可以减少往往由VR场景引起的晕动症状。”

　　在现实世界中，八个摄像头，从各个方面捕捉场景并生成高达30赫兹的深度图像检测手势和动态运动，并通过算法将数据进行组合，编码实时传送到VR站，并显示相应的3D纹理。对于佩戴VR头显的用户，另一台3D摄像机会记录用户的动作。由于Fraunhofer HHI算法可用于3D身体检测和手势解释，因此它自然会在VR场景中互动，而不会干扰控制器。

　　来自虚拟世界的反馈通过投影方式显示在真实场景中，Fraunhofer HHI的特殊图像处理算法用于该AR投影。这两项令人兴奋的技术的结合产生了令人印象深刻的沉浸式体验，为MR交互和应用提供了独特的解决方案。