Facebook 使用深度神经网络在 Oculus Quest 上进行准确的手部跟踪
Facebook Reality Labs 和 Oculus 的研究人员和工程师到目前为止已经开发出了唯一完全依赖单色相机的、完全铰接的 VR 手动跟踪系统。系统不使用主动深度感应技术或任何其他设备。FB 将把这项技术部署为 Oculus Quest 的软件更新,Oculus Quest 是一款无电缆的独立 VR 头盔,现已向消费者提供。
通过将 Quest 的四个摄像头与深度学习和基于模型的跟踪中的新技术结合使用,Facebook 可以实现更大的手动跟踪交互量,并且其体积重量和功耗都更小。处理完全在设备上完成,并且系统经过优化以支持交互手势,例如指向和捏合选择。