VR识别空中手写字 如哈利波特魔法

人类在或AR环境中进行互动的能力，也就是输入(Input)，至今仍具挑战性，大多数互动需要依赖控制器进行。为此，亚利桑那州立大学(ASU)研究人员展示可望取代控制器的产品FMKit，头戴式装置能借此精确追踪个别手指的运动，并识别空中书写。

ASU的研发超越了Leap Motion配件和Oculus Quest 头盔搭载的手部追踪功能，可将个别手指的运动路径记录在3D空间，并与4组手写模板数据集进行比对。

指尖书写能用在身份验证，以及输入文字讯息，代替用来打字、识别语音或选字的手持控制器。

该系统令人惊喜的不仅是将空中手写字转换为文本，潜在商业应用更能将空中书写个性化签名，来解锁XR头戴式装置等密码保护应用。

企业还可借此让团队共享一组密码系统，该系统不仅可以识别数字或字母，五芒星等特殊符号也可行。

FMKit附Python模块，用来收集、预先处理和可视化扫描讯号，目前支持两种输入设备，分别是每秒扫描110次的Leap Motion控制器，以及每秒扫描50次的定制惯性测量数据手套。

用作身份识别系统时，前者精确度可达93%以上，后者则为96%以上。

不过，就手写识别来说，Leap Motion效果更好，该系统识别字词的准确频率最高可达87.4％。虽然仍不足以取代语音输入，但对于一个仅能用在手指操作的头戴式传感器系统来说，这是很好的开端。