从上面的小视频中我们可以看出,逐帧添加艺术效果在视觉上会有明显的闪动,而微软亚洲研究院的工作则实现了一个非常稳定的效果,并且可以做到快速地在线处理。闪动效应(Flickering)产生的原因,是由于单帧艺术风格化处理的解并不稳定,容易受到任何微小变化的影响,比如小的噪声、亮度上的稍微不一样、小的运动等等,这些微小的变化都会在下一帧上有明显的表现,从而造成闪动效应。 为了避免这个问题,研究员们采用了一个并不复杂的做法,就是在网路学习风格化的同时,追踪特征的变化,对于两帧间可以跟踪到的部分,直接沿用前一帧的特征,而两帧间无法跟踪的部分则用当前帧替代,最终实现了视频中大家所看到的稳定的图像效果。 怎么样,对于当下最火的Geek修图姿势你get了吗?你有什么关于图像风格艺术化的想法吗?对我们的视频艺术效果还满意吗?欢迎在文章下方留言与我们交流~ 想了解具体的技术细节就快去学习下方列出的文章吧~ 当然,开奖,我们也会在近期对相关技术进行解读~ 敬请期待! [1] Dongdong Chen, Lu Yuan, Jing Liao, Nenghai Yu, Gang Hua. “StyleBank: An Explicit Representation for Neural Image Style Transfer”, CVPR 2017 [2] Jing Liao, Yuan Yao, Lu Yuan, Gang Hua, Sing Bing Kang. “Visual Attribute Transfer through Deep Image Analogy”, SIGGRAPH 2017 [3] Dongdong Chen, Jing Liao, Lu Yuan, Nenghai Yu, Gang Hua. “Coherent Online Video Style Transfer”, arXiv:1703.09211 你也许还想看:
感谢你关注“微软研究院AI头条”,我们期待你的留言和投稿,共建交流平台。来稿请寄:[email protected]。微软小冰进驻微软研究院微信啦!快去主页和她聊聊天吧。 (责任编辑:本港台直播) |