火爆抖音!各路神仙齐唱《蚂蚁呀嘿》,带你探索背后的原理!

点击 机器学习算法与Python学习选择加星标

精彩内容不迷路

或许天王们太久没有同框过了, 友们用这种方式将他们“召集”在一起,也是别有一番风味。

“永不过时”的《还珠格格》,也赶上了这趟潮流列车。

除了上面这种九宫格模式外,高端的操作还可以实现集体同框

于是,“爱玩”的德云 就以这种方式亮相了。

第一步,打开加速器,启动加速模式。

是不是很简单/p>

不过有点遗憾的是,暂时只有苹果手机才OK(安卓用户泪目)。

例如,李开复老师便友情上演了一首《Only You》。

什么原理/strong>

那么问题来了。

AI,是如何搞定各位大佬来唱歌的呢/p>

让一张照片动起来,人脸跟着音乐一起挤眉弄眼,需要一个叫做一阶运动模型 (First Order Motion Model)来搞定。

技术原理借鉴了去年意大利特伦托大学的一项研究,入选了NIPS 2019。

以川建国同志为参考,来自《冰与火之歌》的演员照片瞬间做到了神同步

不光是脸动,一个模特换pose、奔腾的马也都不在话下。

随后,密集运动 络结合局部近似得到密集运动场。

这个 络还能输出遮挡的mask,指示哪些图像的驱动部分可以通过源图像的扭曲(warping)来重建,哪些部分应该被绘制(根据上下文推断)。

在生成模块按照驱动视频中,提供的源对象移动的图像进行渲染。

此处,研究人员还使用一个生成器 络,根据密集的运动对源图像进行扭曲,并对源图像中被遮挡的图像部分进行着色。

训练阶段,研究人员采用了大量的视频序列集合来训练模型,这当中包含了相同类别的对象。

此前类似研究也很火爆

这种AI特效能够如此火爆,甚至“破圈”,让大家玩得不亦乐乎,最主要的原因是方便——不需要任何编程知识,便可完成。

但在此之前,其实这种AI特效在圈里也是有火过,但都需要一定的计算机能力才可以实现。

比如,一张名人照片和一个你说话的视频,就可以让梦露学你说话。

那么现在,你被“蚂蚁呀嘿”洗脑了吗br>

快去体验下吧。

参考链接:

[1] https://avatarify.ai/
[2] https://github.com/AliaksandrSiarohin/first-order-model

  • 火爆抖音!各路神仙齐唱《蚂蚁呀嘿》,带你探索背后的原理!

    你点的每个“在看”,我都认真当成了AI

声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2021年1月24日
下一篇 2021年1月24日

相关推荐