itSeez3D 推出 Avatar SDK,让你用一张自拍创建出 3D 虚拟形象

  想象一下过去玩运动游戏时的场景:用户想要把自己的脸扫描进系统中,但是系统一直疯狂提示失败,原因是光线不足、背景太乱、脸的位置不对等等……过程让人崩溃,结果也不尽如人意。一项名为 Avatar SDK 的技术或许可以成为广大扫脸失败患者的“福音”。

  Avatar SDK 是一项基于智能手机的高级 3D 扫描技术,由美国公司 itSeez3D 研发,可以将用户的单张自拍照转换成逼真的 3D 形象。网页版 Avatar SDK 已上架。该技术的 beta 版本是免费的,beta 结束后用户需花费 50 美元/月的订阅费,可以创建 1000 个虚拟形象,额外虚拟形象为 0.05 美元/个。

  itSeez3D 实验室的首席执行官 Victor Erukhimov 表示:“目前大多数 3D 扫描软件的解决方案都是通过深度感应相机来创建 3D 模型,而 itSeez3D 完全不需要深度传感器,只要通过智能手机的摄像头和一张照片,就可以创建高质量的 3D 脸部模型。用户可以在许多应用中看到和自己几乎一样的 3D 数字人像,包括社交 VR、游戏、时尚和零售领域等。这种个性化的 3D 虚拟形象可以给用户在 VR 环境中带来更好的沉浸感和交互体验。”

  itSeez3D 总部位于硅谷,研发部门在俄罗斯,其母公司是 Itseez,主要研发类似 OpenCV 的计算机视觉算法。这类计算机视觉算法在工业领域有广泛的应用,如矿山检测等。英特尔去年收购了 itseez,itSeez3D 也从 Itseez 剥离出来,开发了这种面部扫描解决方案。

  电子游戏可能是 itSeez3D 技术最基础的应用,但Victor Erukhimov 也表示,该项技术还可用于在 VR 空间中创建会议室。目前英特尔已经将 Itseez 的技术应用于自动驾驶汽车、数字安全和监控、工业检测等项目中,itSeez3D 与这些项目也有很多合作。

  VR 本身可以给用户带来较好的沉浸式体验,但想要吸引用户持续投入,就需要一个更好的 Avatar 呈现方案。目前有许多公司都在进行这方面的研发,也提出了一些解决方案。

  卡通化的人形 avatar 制作成本较低,应用范围也比较广,是目前相对主流的技术趋势,vTime 等公司采用的就是卡通人形 avatar 方案;CapturingReality 开发出了一整套名为 RealityCapture 的捕捉、还原 3D 模型的技术,用户从不同角度拍摄同一个物体,并导入软件中,软件会初步生成可用的 3D 模型。

  人物建模除建模本身外,还要考虑人物表情等诸多动态交互的因素。itSeez3D 的技术采用了 AI 算法,能预测脸部、头部的形状和质地,鼻子的长度,嘴唇、脸颊的形状等。这种解决方案可能没有深度传感器测量出来的精准,但是速度快,操作也相对简便,或许会有更广阔的应用前景。