在演示视频中我们可以看到

 经典动漫     |      2019-04-04 14:01

  在学习谷歌和华为并向华盛顿大学的UW Reality Lab捐赠一笔资金后,Facebook的付出似乎开始迎来回报。

  他们的方案能够将可变形躯体模型拟合到图像,并估计模型的躯体映射。利用映射模型,系统能够构建3D网格,然后将纹理应用于与躯体映射匹配的网格,同时集成骨架rig以控制图形的运动。如动图或视频所示,具体的效果就像是照片中的对象活了过来。研究小组表示,他们研发的系统适用于图片,卡通人物,甚至是抽象绘画。

  在演示视频中我们可以看到,一名HoloLens用户正看着毕加索画作中的人物从画布“逃走”,广告中的男人向前奔跑,以及詹姆斯保罗麦卡特尼从披头士唱片《Help!》的封面中冒出头来。

  正如论文在局限部分所述,实践结果有点粗糙(当然,这实际上有利于抽象画作),但计算机视觉方法与Facebook对Spark AR平台的全身AR蒙版,图像识别,以及其他功能的研究相一致。

  就目前而言,研究团队只是通过HoloLens演示了这种AR体验,他们没有明确表示方法的实现是否需要这款头显的深度传感器。

  尽管研究技术可能不会马上登陆Spark AR平台或谷歌的移动AR项目,但最终,为华盛顿大学UW Reality Lab提供过资金援助的企业都会从相关的研究中获益。