qeexo-touchtools

2007年,乔布斯发布初代iPhone时,曾向观众演示一种名为“捏放”的操作,即并起两个手指在屏幕上按压,然后将手指分开,从而放大查看照片。这个如今看来再平常不过的功能,当年却引起了不小的轰动:在场的观众齐声大呼“哇哦”!

当然,除了“捏放”式的操作,这样的触屏交互还有诸如三指下滑截屏、单点模拟鼠标左键、长按模拟鼠标右键等更多功能。而如何将触屏的作用发挥到最大,这就更多取决于开发者的想象力了。

2012年成立于美国的Qeexo 便是一家旨在挖掘触屏交互最大潜力的科技企业,其开发的触屏交互已经在华为等多个品牌的手机上运行。

 为触屏交互提供更多纬度

其实,早在Qeexo 奇手成立之前,单指触控甚至多指触控都已经出现了,但在Qeexo 联合创始人Sang Won Lee看来,之前触控应用的维度是不够的,“鼠标最早的时候只有一个按钮,但使用起来非常不方便,因此现在的鼠标都有左键和右键两个按钮,多了一个维度,这才使得电脑操控变得如此顺畅。”Sang Won Lee表示,“在触屏时代,我们就是希望在不增加额外硬件,比如触控笔等的情况下,仅仅使用触摸屏,为设备增加一个新的输入维度。”

据了解,Qeexo 奇手的技术名为FingerSense,其利用移动设备中标准的加速计来感应手指不同部位接触屏幕时所产生的不同振动模式,比如用指关节敲击屏幕的声音十分清脆,而手指触摸屏幕的声音十分轻柔。通过识别比对这些不同的振动模式,FingerSense可以帮助设备识别指尖、指关节、手指甲、触控笔等操作,从而帮助手机等设备摆脱多年未变的单一的“指尖”操控,为触屏交互带来了更多可能性:

例如,用户使用指关节在屏幕上点击滑动,就可以直接进行文本选择操作。而在此之前,如果想要复制某段文字往往需要点击、长按、拖动、选定等一系列繁琐的操作。

只需单指关节连续双击屏幕即可截全屏、单指关节敲击+绘制S字母实现滚动截屏;双指关节双击录屏;单指关节在屏幕划横线实现分屏操作等等。值得一提的是,传统触屏技术也可以通过绘制字母的方式快速打开相应的APP,但其基本上只能在黑屏状态下实现,而FingerSense则可以在亮屏甚至正在使用其他软件的条件下实现这个功能。FingerSense缩短了操控流程,可为消费者节约不少的时间。

Qeexo4

虽然在笔者看来,利用指关节操作首先就需要翻手,这对于已经习惯了指尖操控的用户而言需要很大的学习成本。但我们也发现为屏幕引进更多的操控维度已经成了行业趋势,比如,苹果的3D Touch便为设备带来了鼠标右键的功能。

不过,Sang Won Lee介绍,不同于3D Touch需要屏幕硬件上的支持,FingerSense方案是完全基于软件实现的。不需要新增硬件,即可在移动设备上运行,而且可实现多平台兼容,可无缝整合到任何操作系统中,各类移动设备生产商均可采用。

据了解,从2014年开始,FingerSense方案便已在华为二十余款手机上使用,覆盖用户达到上千万。除了华为,Qeexo目前也还在与阿里云OS、高通等企业展开合作。Sang Won Lee表示,今年下半年会有更多中国手机厂商的产品将搭载这项功能。

帮你“记忆”成千上万种手势

触控技术的发展已经给生活带来了巨大的改变,比如苹果MacBook上的触摸板便已经几乎完全取代了鼠标的功能,而且还有更多如两指滑动翻页、三指滑动切换程序等众多功能。然而,人的记忆始终是有限的,不可能记住太多的快捷方式,目前MacBook便具有三大类共计14项不同的手势功能,但消费者真正能记住的其实并不多。消费者的记忆力已经成了充分发挥触控板以及触摸屏潜力的最大阻碍。

macbook

为此,Qeexo还推出了一款名叫TouchTools的触控系统方案,其希望通过“自然手势”的方法帮助用户自然而然地记住更多的手势功能。

比如用户只需要模拟拿橡皮擦的手势在屏幕上滑动,系统便会自动识别并虚拟出一块橡皮擦,随着手势的移动自动擦除相应的文字。类似的,TouchTools目前已经能够识别并虚拟出诸如卷尺(用于量长度、画直线等)、放大镜、相机(用于截屏)、鼠标、笔等众多与现实生活相联系的功能与工具。

基于同样的原理,Qeexo甚至还可以帮助手机识别人的耳朵,为此Qeexo还专门做了一个名叫EarSense的纯软件产品,用于替代距离传感器,能够识别移动设备与脸和耳朵的触碰,忽视通话中不经意的接触。

[iframe frameborder=”0″ width=”640″ height=”498″ src=”https://v.qq.com/iframe/player.html?vid=n0559uash0m&tiny=0&auto=0″ allowfullscreen]

另外,AR、VR作为继手机之后的下一代个人移动终端,Sang Won Lee表示Qeexo也正在AR、VR领域做一些交互研究。对于具体的研究成果,Sang Won Lee并不愿意多说,但他表示将手抬在眼镜附近进行手势操作可能会比较累,而利用小幅度的真实运动模拟虚拟场景中的大幅度运动却又不够真实,但不管怎么来说,Sang Won Lee始终认为运用于AR、VR领域的新型人机交互依然需要有大数据与机器学习的支持,而这便是Qeexo的根基所在。

另外,Sang Won Lee表示Qeexo的一个优势便是可以将方案引擎写得非常小,占用的CPU资源也比较低,并且非常低功耗,因此,它可以比较方便地嵌入到设备里面去。“与之形成对比的则是,其他很多机器学习引擎必须要连接到云端才能使用。”

Qeexo CTO Chris Harrison是卡耐基梅隆大学人机交互的教授,他的研究广泛地涉猎于各类新型传感技术和人机互动技术,特别潜心于让“小设备派上大用场”的各类人机交互技术。Sang Won Lee表示人才资源也是Qeexo不能忽视的竞争优势,据了解,Qeexo目前的员工有40余人。

据悉,Qeexo奇手科技已经完成450万美元的B轮融资,KTB Network领投,Inventec,Sierra Ventures,Danhua Captial跟投。