usens

2017 年 8 月 24 日,三维人机交互公司 uSens 凌感发布新版 Fingo SDK,uSens 表示,他们率先实现了对大面积遮挡的双手交叠类手部动作的识别,并可实现对十个手指的灵活细微运动的追踪,技术全球领先。

据了解,uSens 凌感在 2017 年 2 月正式公开发售其手部追踪解决方案——Fingo。Fingo 集成软硬件为一体,硬件上通过两个红外摄像头及三个红外辅助灯追踪手部动作,软件上基于计算机视觉及深度学习等算法,实现对双手骨骼的识别,大部分常用手势均可实现精准低延迟识别。经过半年的不断优化改进,本次发布的新版 SDK 在手势的整体稳定性、精确度以及多样化方面大幅提升,对常用手势动作进行了深度优化。

人的手部动作灵活复杂,不仅有直接可见的清晰手型,也有握拳、手指交叉、左右手交叠等等对关节点有大幅遮挡的动作,这些遮挡的部分如何精准识别成为判断手部追踪技术的一个关键指标。uSens 凌感联合创始人、CTO 费越博士介绍:“我们的手部追踪指的是实现双手的自然交互,不是识别几种固定的手势,也不是跟踪五个指尖,而是通过对手部 26 个自由度的追踪,通过深度学习等算法,对手部骨骼进行识别。人是主动性的,不是被动的受限交互,这就不可避免的出现大家生活中常用的双手交互的动作,比如鼓掌、握手、双手交叉换位等。为了给用户创造自然沉浸的三维交互体验,我们认为这部分虽然难度高,但有必要突破,其他方案目前还没有涉及这部分,或者效果不佳。我们先行启动了在这个方向的研发和尝试。”

据介绍,uSens 凌感的手部追踪解决方案 Fingo 目前已经与国内外 AR VR 类头显厂商进行了深度合作,部分厂商已在规划集成 Fingo 的交互头显,预计今年底或明年初将有产品面世。

[iframe frameborder=”0″ width=”640″ height=”498″ src=”https://v.qq.com/iframe/player.html?vid=p0541vah0ef&tiny=0&auto=0″ allowfullscreen]