加州新创公司Aquifi开发出创新的「流畅体验技术」(Fluid Experience Technology),据称可能让微软Kinect、苹果PrimeSense、Leap Motion的独立式控制器以及Google Flutter等采用客制传感器的3D 手势界面面临淘汰命运。
透过结合计算机视觉、机器学习以及云端服务,Aquifi宣称已经开发出一种基于软件的手势辨识系统,并利用目前已经广泛应用于智能型手机、平板计算机、PC与智能电视中的高分辨率视讯相机。此外,该系统还可内嵌于添加双HD镜头的无屏幕装置中,如Google的Nest温控器、汽车与可穿戴式装置。
Aquifi公司销售与营销副总裁Tony Zuccarino表示:「我们的主要目的是创建一个可理解环境与用户的用户接口,以便能够无缝、直觉且流畅地与用户反应。为了适应特定用户需求,我们已经在本地装置中融合了计算机视觉与机器学习,然后从累积所有用户的知识的云端中存取智慧App,接着再将相关知识推送回每位用户的装置中。从这个意义来看,它可不断地从我们的用户基础中学习,因而App越智慧化,我们所拥有的用户就越多──这与Google Voice与时并进的道理是一样的。」
相较于目前驾驶人在开车时还得以手触控聚焦于GPS地图显示,Fluid Experience Technology只需追踪用户眼睛盯着屏幕的位置。
Aquifi是由Canesta公司(现为微软所有)的共同创办人在2011年时成立的,包括Benchmark Capital 以及私人投资者──Blake Krikorian (Sling Media创办人)与Mike Farmwald (Rambus共同创办人),共同筹资900万美元成立。
Aquifi公司的创办人们看好能够因应用户实现3D追踪与手势辨识的能力,无非就是软件以及用户装置中的HD相机。尽管Aquifi的Fluid Experience Technology能够以单一HD相机执行某些功能,但3D追踪的能力则需要两部HD相机。
Aquifi的软件可在用户装置上执行,追踪用户的脸部、手势与手指,然后接取至云端的智慧手势辨识App。
Zuccarino指出:「我们的愿景关键在于利用现有的商用HD相机,以实现可因应用户调整的人机接口,而非让用户来适应机器接口。当今的手势接口十分缺乏弹性,采用客制IC打造,使其十分昂贵,而可辨识的手势是静态的,只能针对某些特定应用。然而,目前的HD相机可提供用户及其环境的全彩、高解析影像。透过利用现有传感器的数据实现100%软件导向的解决方案,我们希望最终将淘汰掉所有客制硬件解决方案──以性能、成本、外形尺寸和功耗而言。」
相较于客制传感器解决方案要求目标必须在装置的正前方,Aquifi的软件方案能够以较广范围来解释用户动作。它不只能定位用户的头部、手部与手指,还可追踪手势与肢体姿势,辨识用户眼睛正在看的脸以及方向。
「用户不一定得站在装置的正前方,因为我们的软件可追踪用户位置,因应用户而调整,使其可从当前位置控制装置,利用实时机器学习,以定位用户的头部、手部与手指,」Zuccarino说。
该公司声称已经拥有多家主要的OEM客户了,预计将在今年年底公开宣传,首批商用Aquifi功能的设备出现在2015年上半年。
Aquifi至今已为其Fluid Experience Technology申请超过35项专利了,并已获准其中4项专利。