Facebook现实实验室Reality Labs(FRL)致力于许多项目，意在让与科技与人的互动变得更加平易近人，FRL此前研究的技术包括VR头盔和AR眼镜。手部追踪技术对虚拟现实尤为重要，它能让技术更有沉浸感，力求以最 "随心所欲"的方式与人类互动。

一开始，FRL的工作旨在打造更自然的设备，例如Touch控制器，这些控制器被设计成舒适手持的形状，内部有很多传感器，而触摸控制器提供了栩栩如生的手部存在感，让基本的VR交互感觉更像真实的物件。

另一方面，FRL正在努力消除对手部控制器的需求，转而感应人类的裸手。该实验室在五年多前就开始研究VR的手部追踪，之前从来没有人能研发消费质量的、无控制器的手部追踪功能。这意味着这项技术必须从头开始创建。

FRL目前正在探索新的实验性文本输入形式，这是一项常见的、对生产力至关重要的任务。FRL提出了一种新的方法，利用基于标记的手部跟踪系统的手部运动，在没有键盘的任何平面上实现触摸打字。该系统将运动直接输入并解码为用户打算输入的文本。

研究人员指出，该技术仍处于早期研究阶段，但说明了手部追踪在活动场景中的潜力。研究人员必须理解不稳定的打字模式，并采用自动语音识别中的统计解码技术，利用运动模型从手部运动中预测按键。使用该方法，打字员仅仅使用他们的手，一个平面，没有其他东西的状态下平均每分钟打出73个字，未纠正错误率为2.4%。与使用实际键盘时相比，打字员使用新系统达到了类似的速度和准确性。