专访uSens凌感CTO费越:手势交互如何革新VR与AR

人工智能 2021-05-31 17:10www.robotxin.com人工智能专业

文 / 进化论 小羿

uSens凌感是一家主攻为/AR提供三维解决方案的公司,总部设在硅谷,大约有20多个人。据悉,其在国内有三个办公室,杭州办公室主打应用与Demo软件开发,北京办公室主打软件算法技术,而深圳办公室则主打供应链等。目前,uSens在全球的员工只有60人左右,大部分为技术人员。值得关注的是,本月初,uSens获得由复星昆仲资本领投的A轮2000万美元融资。

全自然手势交互对/AR意味着什么?

与AR行业虽然十分火热,但几乎所有的行业人士都必须承认的一点是,与AR还处在发展的早期阶段。这主要表现在定位技术、交互精度、分辨率、引擎支持等诸多方面都不完善。总体来看,当前的设计工具(软硬件)生态依然处于初级阶段。

从电脑初期的键盘交互到鼠标的出现,从手机的实体键盘交互到触摸交互,从游戏机的传统手柄到体感手柄,交互的方式随着硬件的更新而进化。业内人士认为,/AR是一个全新的交互平台,在未来有希望替代手机成为主流交互设备。那么,/AR领域势必需要一个新形态的交互方式。

随着资本的推动,与AR行业都在进行着技术的快速更新。因为是一个虚拟的空间,所以必然需要更加自然的交互方式才更符合用户的体验。在中类似手柄或者头盔触摸板的交互方式,有不同的用户群,各有其不同的定位。而对于大众消费群来说,尤其是孩子、年长的人群,他们不习惯用手柄等操控,最简单直接的就是用自己的手与虚拟环境进行交互。从未来趋势上看,全自然的手势交互或将成为主流。

或许,当全自然手势交互和操控在/AR中普及的时候,/AR技术才能真正走向成熟。

全自然手势交互在与AR中的应用

uSens凌感超低延迟全自然手势交互实拍

(来源媒体)

在uSens凌感最新研发的手势交互技术中,已经达到了26自由度高精准度的手势识别和交互操作。费越向科技解释到,人的每只手都有26个自由度的活动范围,这个26个自由度的不同组合让人能用手做出各种动作,操控各种设备。而uSens凌感能将人手的所有动作都识别出来,这就大大解放了人在虚拟空间中的交互限制。更重要的是,更重要的是,uSens目前的技术可以识别双手的真实三维形态,而且目前最新的技术可以识别出真手的骨骼,而非简单手势轮廓。

在采访现场,费越还向科技展现了与AR相结合的技术。通过佩戴手势交互头部位置追踪技术的头显Impression Pi印象湃,记者通过头盔看到了叠加在真实场景中的一辆汽车,通过手势点击,可以将汽车慢慢放大,当达到与真实汽车大小的时候,就进入了场景中,可以通过头部的旋转和位移查看汽车内部不同位置的各处细节。而用户在AR与中能够无缝切换的功能,将大大拓宽AR应用的可能性。

费越认为,未来的与AR会融合在一起,主打娱乐性,AR主打实用性。但从全自然手势交互与头部位置追踪的支持下,中的交互方式分为两种。一种是靠徒手即可操作的,比如随即拿起一件东西时,这是手势交互运用最好的。另一种是依靠工具进行交互,比如写字用的笔,修理用的螺丝刀,游戏中的体感枪等等。

费越称,uSens即将发布最新版的手势交互SDK未来会配置不同的硬件形态,比如模组、一体机等。

面向移动,针对/AR开发者输出技术方案

作为一家技术公司,费越表示uSens将专注在自身最有核心竞争力的方面。需要说明的是,uSens除了具备26自由度的手势交互技术,还拥有6自由度头部位置追踪技术,而且这两个技术可以整合到一个模块中。如此一来,/AR设备在裸手交互和头部位置追踪上的两大难点得以解决。

在具体方案上,费越称uSens凌感主要向AR/平台、硬件厂商、内容开发者等提供三种解决方案。一种是对于有技术整合实力的大公司来说,可以提供纯技术输出;第二种是针对/AR新硬件研发厂商,可以将手势交互与位置追踪的模块置入其中;第三种是直接卖模组硬件,现有的已经生产的头盔如HTC VIVE、三星Gear

等也可以通过外置模组硬件达到手势交互和头部位置追踪的效果。

目前,uSens的26自由度手势交互识别精度高、延迟低,对于移动来说已经足够使用。费越称,目前Unity平台对于此项技术的支持很好,开发者可以在平台上生成带手势交互的各版本游戏。

虽然uSens凌感的手势模块支持很多设备使用,费越更注重的是移动。他认为,移动才是真正能被大众消费者接受的主流设备,而非自然的三维体验将是阻碍移动进入大众市场的最重要的因素。未来的头盔一旦解决了这个问题,就会变得更加简单便携好用,对于移动的普及会起到重要作用。

Copyright © 2016-2025 www.robotxin.com 人工智能机器人网 版权所有 Power by