除了脸部表情捕捉的研究,Li Hao研究的另一方面就是头部除了脸之外的部分 — 头发。他研究的3D发型扫描技术已经被维塔数码(Weta Digital)应用于工业实践。 维塔数码是一家全球领先的视觉特效公司,总部在新西兰。维塔数码曾5次获得奥斯卡最佳视觉效果奖。《魔戒三部曲》、《金刚》、《阿凡达》等片中的视效均出自于维塔的制作团。 Li Hao还在维塔数码参与了《速度与激情7》的后期制作,帮助车祸身亡的主演保罗·沃克(Paul Walker)“出现”在电影中。 拍摄方让保罗·沃克的弟弟作为替身参加了拍摄,但由于脸不一样,Li Hao等就负责合成保罗·沃克的三维模型,然后给替身“换脸”。 这么一来,不幸离世的保罗·沃克就在电影中奇迹般的“复活”了! Pinscreen的创办 Pinscreen创办于2015年,之前一直处于保密状态,硅谷密探也是第一家采访到Pinscreen的新产品发布的媒体。 Pinscreen的创办的契机之一是有苹果等大公司联系Li Hao要收购他的一项技术。Li Hao看到这项技术的市场前景,决定独立成立公司来做这个事情。 Pinscreen去年获得180万美金种子投资,投资方包括Lux Capital Colopl VR Fund,Magic Leap的一个前VP,其他投资人还包括Magic Leap的VP,Microsoft的CTO、Salesforce的CTO等。 Pinscreen要做什么 Pinscreen现在团队是十个人左右,总部在洛杉矶,他们团队过去的研究都是关于脸和头发,他们的产品也与3D化身(Avatar,虚拟形象)有关。 他们最近推出一个实验产品,却是恶搞川普和希拉里(/pinscreen.com/election2016)。 上传一张希拉里的图片,你就可以给其他视频中的人换脸。譬如:希拉里化身鸟叔,还生成了gif图。 这是美国新任总统川普,分分钟化身红军。 Li Hao表示他们的这项技术可以非常轻松的合成动图,并且现场演示了换脸生成gif。 (用Li Hao的照片生成的GIF图) Li Hao说,他们这个产品的主要使命是改变人们聊天交互的表情包。通过加入我们自己的照片或者朋友的图片甚至明星的图片,生成有意思的内容,将大大增加表情包的可玩性。 表情包和动图是新一代年轻人的交互方式,很容易流行,未来随着技术的进化,清晰度会越来越高,越来越逼真,这将有很高的广告价值和以及提供衍生品的商业价值。 (图片来自Los Angeles Times, Michael Robinson Chávez) Li Hao表示这个产品是他们技术的一个简单应用,他们除了用图片生成3D化身(Avatar),还有其他更多应用方式。 此前在CVPR 2016上,他们展示了一个成果:仅用一个镜头捕捉人的动作,就可以转化成动画角色。视频演示如下: Pinscreen目前的方案不需要深度传感器,只需要二维的输入。 Li Hao 对于 Pinscreen 在社交媒体的潜力非常有信心,他认为他们的技术能普及3D化身,将被用在游戏、VR/AR沟通和社交媒体中。 当问到如何平衡好创业和学术的关系时,Li Hao表示要有一个很强的团队,那样他可以把精力放在最重要的事情上。USC是一所奔放自由的私立大学,只要学术和创业都做得好,相互之间是有所脾益的,学校也会支持。 在聊到计算机视觉领域的创业问题时,Li Hao表示一定要做自己感兴趣的事情,不能为了创业而创业,要想好自己要解决什么样的问题。 ▼▼▼ 最后,请欣赏Lady Gaga的“Hao之歌”。(绝!对!洗!脑!) 0:27 The Official Hao Song来自硅谷密探 本文为硅谷密探旗下《AI严肃说》专栏文章
作者:严肃 (责任编辑:本港台直播) |