Facebook Reality Labs正研发手部追踪技术

Facebook现实实验室Reality Labs(FRL)致力于许多项目 , 意在让与科技与人的互动变得更加平易近人 , FRL此前研究的技术包括VR头盔和AR眼镜 。 手部追踪技术对虚拟现实尤为重要 , 它能让技术更有沉浸感 , 力求以最 "随心所欲"的方式与人类互动 。
【Facebook Reality Labs正研发手部追踪技术】一开始 , FRL的工作旨在打造更自然的设备 , 例如Touch控制器 , 这些控制器被设计成舒适手持的形状 , 内部有很多传感器 , 而触摸控制器提供了栩栩如生的手部存在感 , 让基本的VR交互感觉更像真实的物件 。
Facebook Reality Labs正研发手部追踪技术文章插图
另一方面 , FRL正在努力消除对手部控制器的需求 , 转而感应人类的裸手 。 该实验室在五年多前就开始研究VR的手部追踪 , 之前从来没有人能研发消费质量的、无控制器的手部追踪功能 。 这意味着这项技术必须从头开始创建 。
FRL目前正在探索新的实验性文本输入形式 , 这是一项常见的、对生产力至关重要的任务 。 FRL提出了一种新的方法 , 利用基于标记的手部跟踪系统的手部运动 , 在没有键盘的任何平面上实现触摸打字 。 该系统将运动直接输入并解码为用户打算输入的文本 。
Facebook Reality Labs正研发手部追踪技术文章插图
研究人员指出 , 该技术仍处于早期研究阶段 , 但说明了手部追踪在活动场景中的潜力 。 研究人员必须理解不稳定的打字模式 , 并采用自动语音识别中的统计解码技术 , 利用运动模型从手部运动中预测按键 。 使用该方法 , 打字员仅仅使用他们的手 , 一个平面 , 没有其他东西的状态下平均每分钟打出73个字 , 未纠正错误率为2.4% 。 与使用实际键盘时相比 , 打字员使用新系统达到了类似的速度和准确性 。
Facebook Reality Labs正研发手部追踪技术文章插图