手势识别通过手机摄像头即可完成,HandCV选择免费开源打开市场

物联网

   交互在VR/AR领域的连接性显得尤为重要,最近HandCV适时推出了新产品——基于单目摄像头的手势识别,或许能引发交互的新猜想。

  手势识别可以说是VR交互的新兴主流方向,其他的交互方式还有控制器、语音交互、头部控制等等。但在HandCV创始人&CEO朱郁丛看来,另外几种交互方式还不是完美的解决方案,比如控制器续航时间短,容易丢失,头部控制则需要移动,触发交互还需悬停1-2秒。连眼球追踪交互,朱郁丛也担忧它悬停的触发点不尽如人意。

  “硬件平台本身计算能力有限,手机更是如此,所以把VR交互简单化,就是专注于移动VR。”朱郁丛告诉猎云网。

  现今市面上大多厂商致力于解决深度手势识别问题,通过定制硬件与适配软件,来满足复杂、高精度要求的交互需求,比如LeapMotion、usens凌感科技等等。当然,一体机之中增加手势识别意味着成本的显著增加。更何况,目前市面上占有率90%的手机盒子没有集成这项功能,假如增加手势识别的话,需要购买额外的解决方案,这是非常不现实的——解决方案的成本就比盒子贵得多。

  DEMO演示视频

  化繁为简也不是一件容易的事,HandCV依托于手机自带的摄像头完成识别,并且精准程度不亚于深度摄像头。也就是说,只要手机具有摄像头,HandCV就能够应用。经过测试,在iPhone 6Plus上调用SDK+摄像头开启的话,CPU仅占用8%-10%,功耗较低。

  基于单目摄像头,HandCV不仅能应用在VR/AR上,机器人,大屏都在其应用范围之内。不过朱郁丛表示,当前这种交互形式在VR/AR上是刚需。“举个例子,戴VR头盔看电影拖拽进度条快进,就是我们现在能做到的。”HandCV手势识别分为勾选(点击)、捏合和拖拽等,能够解决基础的交互,点选、玩一些小游戏都可以轻松完成。

物联网

  HandCV计划在9月交付SDK,并免费开源给开发者。对于团队来说,免费策略可以更快覆盖市场,占据先机。在此之前,朱郁丛还需要考虑怎样把更好的人工智能加入其中,以便在极暗光、强逆光环境下提高识别准确率。为此他们自建数据库,进行机器学习和训练。

  而对于盈利方向,HandCV选择向B端进行技术授权,按License收取技术服务费。朱郁丛向猎云网透露,影创、UtoVR、优酷VR、极维客等等都是首先选择合作的厂家。

 

  HandCV团队曾在虚拟试衣方向有过研究,名为英梅吉。如今主推手势识别。整个团队在计算机视觉、人工智能等领域有十几年的经验积累,专注于图形图像识别领域。公司曾获Pre-A轮融资,如今正在筹备下一轮。