' o( w6 g/ H8 T G% U % C7 h/ i% G6 W ^6 c/ _) h
6 z! O% o5 Y3 h) M& ?
) D# N7 V3 {- z6 g. f 3 ^3 ]) P I0 c4 o \
, ?# B' j6 e: z
9 u _/ N" d) H: [
# G& b' ^: }+ r0 |1 _) i* \ 3 h5 C% G! n$ {- E
: A; j# K; j& r# T; [
! \( {4 T& V: R- \9 W
4 |' n7 p7 n4 r) b/ Z 3 H; f1 @" M* j' }5 e
+ h; o6 @6 w. _
; l. g: ]: o! |- k8 L' S
3 \/ J" q0 W9 w& H/ q& [5 e! ?6 a* y
/ `8 b' r6 G% C+ ? ; d Q$ M5 ^" y
( P1 |4 Z1 P% z0 T8 E; k" Y- e8 ?: D% N% \- u: U
5 Q2 c" N3 N" F/ } 新特效火爆抖音!各路神仙齐唱《蚂蚁呀嘿》,网友:短短几秒需一生来治愈
4 U- Y# }. @2 r Y
金磊 杨净 发自 凹非寺
& s; ~. p) \9 r3 }# A. q0 y 量子位 报道 | 公众号 QbitAI
4 J' R4 o0 r& F 当互联网大佬们集体唱歌,会擦出怎样的火花?
: `% v* n7 l) g; i* b3 q 现在,火爆抖音的AI特效,一键就可以实现梦幻联动。
9 B) U1 R Y5 i$ x# q6 C: ~0 j
瞧!马云、马化腾、马斯克等大佬们,正在集体演唱神曲《蚂蚁呀嘿》。
$ d2 Y/ R) z8 E7 N# D/ z& k 不光演唱,表情也是十分的卖力(傲娇的小眼神很是传神啊)。
' V: {2 h& E" F+ Z T+ @8 @, I
+ H' ]2 g @1 ?1 \4 D7 M2 k5 { 完全看不出是被迫的样子呢。(手动狗头)
8 {/ o6 k' ^) H! i3 U$ Z( b 效果之魔性,引得网友直呼:
* n, q5 b9 q0 H# C o6 \
3 w! [2 O- Z3 [, C短短的几秒,要用一生去治愈…..
* |0 W! {" K: k
8 @; A' ?6 r9 `9 p" s
还有网友表示,最近是咋滴啦?!一打开抖音,好像捅了蚂蚁窝。
( H6 H! N( J0 G
, W9 L/ h/ ~. s 温馨提示:听音乐读本文,效果更佳哦!
8 n7 F! G {& ~5 I8 ]# j
大家一起《蚂蚁呀嘿》!
2 Z2 `# ]! y8 ?: b# W/ n% m 这款AI特效,只需要一张照片,就可以火速让anyone“蚂蚁呀嘿”。
+ }% M" O. Q i1 N1 d
正因为这么便捷,果不其然,马上成为了抖音网友们的“新宠”。
1 i4 n& D- E" x! L
各路名人开始搞起!
* q& O/ w; o \$ x& |& a9 i- Y4 _. s( a
首先登场的是四大天王:刘德华、张学友、郭富城和黎明!
. X T3 W1 @; X7 Z2 y7 S/ B/ v
$ J( `5 K* c- w l* O" p& Y 或许天王们太久没有同框过了,网友们用这种方式将他们“召集”在一起,也是别有一番风味。
+ S+ H! l7 J' h: f) K$ u+ y6 q
“永不过时”的《还珠格格》,也赶上了这趟潮流列车。
& K# O! t/ F& E$ a0 q0 W, S9 f6 g' U$ F ]
王者峡谷里的英雄们,网友们也是没有放过。
1 `$ M. i$ I' \( X 不得不感慨二次元的颜值,不论怎么恶搞、变形,还是能保持俊美的样子(程咬金除外)。
9 z; w+ R0 _2 @1 K3 ^! j
: I8 {9 S5 ~6 @" [# U$ x$ W 除了上面这种九宫格模式外,高端的操作还可以实现集体同框。
& F& i( `! H9 k3 A3 w' W2 K0 v
于是,“爱玩”的德云社就以这种方式亮相了。
3 p( z& R3 ~8 N. g: D
- D6 u( K. E' a8 S9 T9 C9 i! P 不知道是不是因为特效太过逼真、还是脖子有点短(不是),竟然还有人以为是真的。
9 j# S# |# d2 L9 F4 H1 q4 U0 Y
) |) V$ H' e7 b3 t7 c第一眼我以为是特效。
?( I& U3 s+ J0 v6 k+ `$ m* ]+ }
5 O( t R# }2 O) b
- t) r$ a* ]* t5 q R( z4 T 当然,此等名场面,怎么少得了量子位本位!集体《蚂蚁呀嘿》表演,隆重登场!
) q- ~4 [& T3 g
- ]$ k, P5 R2 r; z OK,各种效果、各种玩法已经展示完毕。
( N( t2 J5 l9 }; i1 L# b. p0 o' f, _ 接下来,是时候上手实操了!
8 }8 ~0 j% X# r5 m" Q) Q: @' X4 X* i
如何制作专属的“蚂蚁呀嘿”?
: [+ T C) Z$ b; Y. L
首先需要准备三个工具:
+ N+ p% \- R* d, j5 V9 L8 q
Avatarify、任意一款加速器APP、剪映(可有可无)。
" T, \" |# p) J. P
w( k5 [ G C, j+ h# `
第一步,打开加速器,启动加速模式。
r0 r& C& s* u4 o0 x' K
7 d2 ]3 n1 f6 n V5 _ 第二步,打开这款软件Avatarify,选择一张照片即可进入选择特效页面(脸正一点食用效果更佳)。
! ]& `" c/ S# w& T8 L+ N 然后向下拉,找到布拉德·皮特的特效即可。
- j! D" n3 Z2 A/ P, ]8 f" R/ Y- A+ b `) F! A I* B( f* A3 u
是不是很简单?
! v1 R I9 I2 w5 R. l x
不过有点遗憾的是,暂时只有苹果手机才OK(安卓用户泪目)。
3 L4 e; A ~+ [
. }$ u8 t8 t+ i/ F% z: ^ 一个人演唱“蚂蚁呀嘿”的效果就已经实现了。
+ V- G6 O! I1 v; X# Y$ k, t- e 如果想要多人演唱、九宫格那样式儿的,那就需要剪映来加持了,这里就不详细展开了。
$ \7 `' L% o: y6 l! u% ?* F7 n 当然,这款软件除了《蚂蚁呀嘿》之外,还有很多模板可选。
) ^7 y. B8 g$ O$ |- ]7 g e
/ ]9 u7 h, J8 @# _
例如,李开复老师便友情上演了一首《Only You》。
0 G8 w8 N9 _- H& r
* L% @. k# {7 w4 `8 g. m4 g# ~ 随着这波潮流,Avatarify及其他相关软件,已经超过微信、拼多多、抖音的下载量,登顶苹果App Store免费榜“前三甲”!
0 O( ?0 z. g H5 K
) _7 J$ p( @' _( [0 D/ ~6 P% P4 S! @
什么原理?
0 H+ N" P- d7 s- l: Z
那么问题来了。
) X2 L' `; }4 I% c0 B' @0 y5 w
AI,是如何搞定各位大佬来唱歌的呢?
# M3 G1 y% i5 w/ o% v6 V4 p
让一张照片动起来,人脸跟着音乐一起挤眉弄眼,需要一个叫做一阶运动模型(First Order Motion Model)来搞定。
5 N3 O9 L1 T. w5 T* W, {; K 技术原理借鉴了去年意大利特伦托大学的一项研究,入选了NIPS 2019。
6 j1 J$ V' Y3 Z5 |
+ C4 ]1 s& O. v4 ]1 y 当时的例子是这样的。
+ Y" j9 _1 b: r& E( G0 K1 Z8 M
以川建国同志为参考,来自《冰与火之歌》的演员照片瞬间做到了神同步。
' t. x: B7 A- |* A9 g 不光是脸动,一个模特换pose、奔腾的马也都不在话下。
% K- p3 f1 R) L4 q% D' o- v# W9 D0 P$ t7 [" }* S$ ~
模型框架主要由2部分构成,运动估计模块和图像生成模块。
: s* M p1 ~: J, B2 D
运动估计模块的目的,是预测一个密集的运动场。研究人员假设存在一个抽象的参考框架,并且独立估计两个变换,分别是‘从参考到源’和‘从参考到驱动’,这样就能够独立处理源帧和驱动帧。
6 {% _" l/ f; e" f4 _( h
而这两种变换,通过使用以自监督方式学习的关键点来获得。利用局部仿射变换对每个关键点附近的运动进行建模。
9 o* Q V/ z/ Y9 s6 q' _
- b- P3 O* G: v 随后,密集运动网络结合局部近似得到密集运动场。
5 A7 ?2 |2 F: k6 ^$ ^" A, @' ]
这个网络还能输出遮挡的mask,指示哪些图像的驱动部分可以通过源图像的扭曲(warping)来重建,哪些部分应该被绘制(根据上下文推断)。
% I) i/ R" {8 ?4 \- ^
在生成模块按照驱动视频中,提供的源对象移动的图像进行渲染。
' ]# }8 R# [, h* a( }7 {/ _ 此处,研究人员还使用一个生成器网络,根据密集的运动对源图像进行扭曲,并对源图像中被遮挡的图像部分进行着色。
8 a4 j. X! E3 P7 p2 X8 a u
训练阶段,研究人员采用了大量的视频序列集合来训练模型,这当中包含了相同类别的对象。
5 S4 W( F6 k9 S
9 o. ^ I6 C! D. v. l1 j# C; h: C 随后在测试阶段,研究人员将模型应用于由源图像和驱动视频的每一帧组成的对,并执行源对象的图像动画。
( j7 _8 i+ l) Z9 C: P 最终在质量评估中,这一方法在所有基准上都明显优于当前先进技术。
/ F @1 z6 F1 e, G3 H& j) K- G+ ^
- A; w4 ^: W1 Q' d2 z 此前类似研究也很火爆
2 @& A' m3 B- o9 R) W5 V 这种AI特效能够如此火爆,甚至“破圈”,让大家玩得不亦乐乎,最主要的原因是方便——不需要任何编程知识,便可完成。
# F7 y S0 r% k9 W 但在此之前,其实这种AI特效在圈里也是有火过,但都需要一定的计算机能力才可以实现。
* G8 n: j. Y1 f+ d2 w7 Y
比如,一张名人照片和一个你说话的视频,就可以让梦露学你说话。
1 u" b+ H) ~0 {/ m. O
1 t% u* A7 Y+ Q! \+ o1 _ 还有,印度程序员开发的实时动画特效。你一动,蒙娜丽莎(36.570, -0.37, -1.00%)跟着你一起动~
& s3 h8 j g/ y2 `$ p! v( r* O, P! S z: E* L) q
那么现在,你被“蚂蚁呀嘿”洗脑了吗?
8 j9 D2 ?- }) s) [+ H! R
' t9 [; w1 ?3 t
* N( d' a3 I" K/ b6 K
- X. E3 T4 y) j; D$ O% t! ^: ~5 j# g2 |' r* N8 x7 a
# X g5 O& y, w9 d* }4 C; s m5 J- m# k
2 d2 Y& y8 y) V% ^; [
}) L3 M9 ?. O; |( o/ I
H# d& v2 }9 }, y. X4 P. y* J4 J2 k, h' i9 U7 y
% d9 V' B6 _) I! Y0 W5 J( W
* d: u7 A' Z \6 N 7 j& ]; P5 |5 P: s
" ], h8 w( t9 F
3 s5 p" I6 |; z' F8 D
9 h* N6 {0 M: W; Y; e% p+ y" E7 p
0 r! X/ [0 z: v$ P6 h" D9 W
" \. J4 o* ?# r+ K
! k& E8 f3 J+ t A% Z1 H% B& Z9 |" X
# C* ~2 b% D" K; ?$ O! _9 }" R
- q) u1 y, b0 J" _8 X
) A( a. S0 O# U* g- U7 {
# o9 V6 c4 x( D a: ^# r
0 t: G( b" F8 u- e
6 |- f( \$ X# I9 x u+ a
. k1 w# G3 m! e$ i) {3 T
# f! Q Z1 k9 i4 r. Q0 f# U8 G& N k
* R% d) V C A8 w4 `% Y$ \1 T2 @8 [
7 i( Z) k# M4 Z5 f% c4 [3 d) X: n
0 q* m$ y1 q& g; ? ( H9 @9 }* W5 m
海量资讯、精准解读,尽在新浪财经APP
( w& ~. }* k, M+ J, f9 w! P5 o' o: y
1 c5 i1 }4 ?- O5 u' m
% o3 a2 r3 [! ]! h7 i
$ x f9 P2 [4 \1 R6 i * ?/ j+ g" D) n0 o8 p! V4 K
0 q7 ` [6 ]% G4 l* B X& S, [9 I - K; S: L/ M% f5 q
0 Z: H/ ]. x. M+ H- i9 e! Q
责任编辑:梁斌 SF055
# U# C3 p7 X# J8 s) D; x7 T
k9 g1 ~- _+ }: L4 W
: u F5 o. W: p0 t2 [