) \6 B4 T3 {/ U* @
0 H& d6 P4 Z7 Q
' p, _6 ~# q, n) Y2 w ( M' U: m. C/ P. M
5 _- I# y8 K) x. g z; U" S
/ `( d5 [/ J, d9 Y$ M
; u( |3 C+ q. J+ ]( x % p, q- Q0 y4 J' H
) N0 R( ?3 B% ], p7 F8 G; f
" x! S+ w; q$ U* ^; a# s C9 f/ o1 x
. U" Y. \; R( }1 A
# ]- E- H3 F6 l5 V 2 _; o2 q) m' r
! }% D0 Z" L6 l% @9 o/ ]. r ! `* W4 N% ~# M# T/ O6 o/ F
: H$ j! u- W' P
5 l- H6 y: `+ |/ `& B& ]
3 |4 |6 _: H# m" X/ G C
/ {& R5 b* z0 Y6 G9 T
) N5 ~" D# P" E/ C) `1 l
) o% m; [5 S* ^, d0 m+ Y) o$ {& ?; ~ 新特效火爆抖音!各路神仙齐唱《蚂蚁呀嘿》,网友:短短几秒需一生来治愈
8 [: g5 V, ^. z7 \4 ~4 I1 _
金磊 杨净 发自 凹非寺
' ~2 T( y2 V# j+ ?
量子位 报道 | 公众号 QbitAI
: g! o7 |* W9 [* q! B7 n* d 当互联网大佬们集体唱歌,会擦出怎样的火花?
; h' b& ?/ G" _, @, r3 k* ?( T4 L. ]
现在,火爆抖音的AI特效,一键就可以实现梦幻联动。
- Z1 \1 C0 {3 A' H. p" h
瞧!马云、马化腾、马斯克等大佬们,正在集体演唱神曲《蚂蚁呀嘿》。
5 K7 a) o! ~, \2 Y
不光演唱,表情也是十分的卖力(傲娇的小眼神很是传神啊)。
( i' R# |: M3 N: y
; R. n5 R9 S& G4 r' `' e
完全看不出是被迫的样子呢。(手动狗头)
8 V4 k. X3 v. U/ W( y n 效果之魔性,引得网友直呼:
# r% c) U- R6 {6 E0 q3 j* s
1 |0 k% P9 M& P7 w" \% x! k" w
短短的几秒,要用一生去治愈…..
5 N3 }6 {6 F, x9 ?) e3 g
! M' _+ m0 Y2 z# Z 还有网友表示,最近是咋滴啦?!一打开抖音,好像捅了蚂蚁窝。
& r$ l1 T0 [; V2 Q2 _7 T
' h2 z& q2 `: V 温馨提示:听音乐读本文,效果更佳哦!
H' r# o9 J5 K# z, O: S3 ?
大家一起《蚂蚁呀嘿》!
- K2 V+ m* g9 m. I
这款AI特效,只需要一张照片,就可以火速让anyone“蚂蚁呀嘿”。
. g& W# ~7 H, q/ t5 T' C' u9 d; \
正因为这么便捷,果不其然,马上成为了抖音网友们的“新宠”。
. w1 [# n) I) Q, r0 O2 { 各路名人开始搞起!
. f) }# H3 {2 j
首先登场的是四大天王:刘德华、张学友、郭富城和黎明!
% Z7 j( |" j3 v. d! T
) J+ f9 h% f, R 或许天王们太久没有同框过了,网友们用这种方式将他们“召集”在一起,也是别有一番风味。
4 |3 x [$ e4 x0 ?5 ]! _
“永不过时”的《还珠格格》,也赶上了这趟潮流列车。
# k# U2 V* u0 B4 B% }7 Y4 V
6 u2 ^3 U. a! a 王者峡谷里的英雄们,网友们也是没有放过。
" n3 p1 x1 B) T 不得不感慨二次元的颜值,不论怎么恶搞、变形,还是能保持俊美的样子(程咬金除外)。
) ?2 @" E1 F% f
" C8 l# G. o8 L. r# ^ 除了上面这种九宫格模式外,高端的操作还可以实现集体同框。
- G$ g" z+ d2 H6 w8 q( \
于是,“爱玩”的德云社就以这种方式亮相了。
) x: B& H0 o7 x& X5 L, B' N7 O: q! ]1 N1 w
不知道是不是因为特效太过逼真、还是脖子有点短(不是),竟然还有人以为是真的。
4 n# ~- l$ Y2 u7 |9 f: K0 H
2 S7 k% C0 i& a8 g
第一眼我以为是特效。
* ~3 ]8 C# x# Q) z
9 ]- V, c$ Z- y A2 ?* s. }" K' t5 I& X7 y& N
当然,此等名场面,怎么少得了量子位本位!集体《蚂蚁呀嘿》表演,隆重登场!
% X/ K! ], W" ^& j# s
J% A/ C. U* a OK,各种效果、各种玩法已经展示完毕。
; }+ y; C: q7 ~; i b9 u. d: b
接下来,是时候上手实操了!
" |2 J* r. a8 Q1 ^+ q. h, l. [/ |8 {
如何制作专属的“蚂蚁呀嘿”?
" M& g' Y6 f0 _* @, T% t
首先需要准备三个工具:
9 r" v" b3 y* |- j% R Avatarify、任意一款加速器APP、剪映(可有可无)。
Q) X6 p+ l5 l# A! S9 P% D1 z
" Y4 F. f3 ?$ q 第一步,打开加速器,启动加速模式。
4 B; N" y" R y/ F0 z7 m2 {/ L
$ F f' }, T1 Y$ e# D* t 第二步,打开这款软件Avatarify,选择一张照片即可进入选择特效页面(脸正一点食用效果更佳)。
: g6 ~$ K6 V5 S8 ^& i; i. {5 k 然后向下拉,找到布拉德·皮特的特效即可。
$ e( {/ y! d. [8 w/ K( f0 J
# T: }' [0 U7 e# {- V" X
是不是很简单?
* c- F. ^5 v3 ?3 n
不过有点遗憾的是,暂时只有苹果手机才OK(安卓用户泪目)。
' u$ s; v/ q }0 O* ?# k$ d: @7 A4 `# a( Y
一个人演唱“蚂蚁呀嘿”的效果就已经实现了。
+ }9 S6 A$ Z/ t! e: I 如果想要多人演唱、九宫格那样式儿的,那就需要剪映来加持了,这里就不详细展开了。
9 G. y# |! [; _ 当然,这款软件除了《蚂蚁呀嘿》之外,还有很多模板可选。
/ M0 [! }6 P; {1 n( L
% _& ^7 g' P/ }. V X 例如,李开复老师便友情上演了一首《Only You》。
) c2 \# Z5 _3 G6 c6 u( p) X7 B; d4 j: @- H9 X8 {- x0 l' D
随着这波潮流,Avatarify及其他相关软件,已经超过微信、拼多多、抖音的下载量,登顶苹果App Store免费榜“前三甲”!
5 |& F# A. I( Y8 M8 x
' F1 o- F+ L, H1 b9 P$ _" k 什么原理?
. L; P: y& |4 ~4 Q5 B8 E 那么问题来了。
4 S0 \- C- x3 p: B8 B* I
AI,是如何搞定各位大佬来唱歌的呢?
, z' T& G2 [: |- z9 t' z 让一张照片动起来,人脸跟着音乐一起挤眉弄眼,需要一个叫做一阶运动模型(First Order Motion Model)来搞定。
4 {9 D; g/ V/ K6 `* b
技术原理借鉴了去年意大利特伦托大学的一项研究,入选了NIPS 2019。
# \8 O. R; c1 l5 o
( D$ K( U0 e; i3 G( h 当时的例子是这样的。
) a( w$ x$ c( x- @0 y0 P
! K Q+ z4 [* p' t1 L4 e: ` 以川建国同志为参考,来自《冰与火之歌》的演员照片瞬间做到了神同步。
8 n0 W2 H% _# P* S: d
不光是脸动,一个模特换pose、奔腾的马也都不在话下。
$ b3 b& m3 G- c0 ?6 Q3 o% v- A! H
模型框架主要由2部分构成,运动估计模块和图像生成模块。
8 ~& J% G6 @! l+ N! M 运动估计模块的目的,是预测一个密集的运动场。研究人员假设存在一个抽象的参考框架,并且独立估计两个变换,分别是‘从参考到源’和‘从参考到驱动’,这样就能够独立处理源帧和驱动帧。
% l8 E8 w* I3 K4 q" U5 }' t 而这两种变换,通过使用以自监督方式学习的关键点来获得。利用局部仿射变换对每个关键点附近的运动进行建模。
3 S% I$ q8 B8 D$ }2 D& C& Z" x- h9 Q. r) E! h" k
随后,密集运动网络结合局部近似得到密集运动场。
* n6 \/ R/ e' G0 b9 @
这个网络还能输出遮挡的mask,指示哪些图像的驱动部分可以通过源图像的扭曲(warping)来重建,哪些部分应该被绘制(根据上下文推断)。
+ a! E+ X4 q7 n( d1 v, b8 P! [
在生成模块按照驱动视频中,提供的源对象移动的图像进行渲染。
6 G8 y% k1 f% E( T( n 此处,研究人员还使用一个生成器网络,根据密集的运动对源图像进行扭曲,并对源图像中被遮挡的图像部分进行着色。
6 t8 L+ R z9 H: _# p; ]/ h 训练阶段,研究人员采用了大量的视频序列集合来训练模型,这当中包含了相同类别的对象。
& M0 L: @- A h+ t
2 B' V# C5 I/ t% H: F2 U 随后在测试阶段,研究人员将模型应用于由源图像和驱动视频的每一帧组成的对,并执行源对象的图像动画。
( @' ]2 M w: V c
最终在质量评估中,这一方法在所有基准上都明显优于当前先进技术。
2 B9 B" L& \# Q9 Y2 a5 @* ]
* v% a% n$ y* u; h& \ 此前类似研究也很火爆
% A' M8 W0 p/ K; f* u 这种AI特效能够如此火爆,甚至“破圈”,让大家玩得不亦乐乎,最主要的原因是方便——不需要任何编程知识,便可完成。
/ T, L8 X1 s2 g" U; w) Z' \5 @ 但在此之前,其实这种AI特效在圈里也是有火过,但都需要一定的计算机能力才可以实现。
# b: o3 Z8 M4 y1 B3 p7 {: G. I 比如,一张名人照片和一个你说话的视频,就可以让梦露学你说话。
' H# H7 Y7 x7 q' C0 r% Q9 l
. q" Q& J3 a# j2 E3 I4 M1 \ 还有,印度程序员开发的实时动画特效。你一动,蒙娜丽莎(36.570, -0.37, -1.00%)跟着你一起动~
3 t* Y$ A& n V! v
- d) M" q6 L0 r$ l
那么现在,你被“蚂蚁呀嘿”洗脑了吗?
: M2 _9 S0 g o2 |, z
# q3 r2 V9 ?& Z
7 @ \0 @1 S! v8 q7 g
+ ?6 @' Y& {/ B( ^6 L0 V5 `
* s D9 ^- N' z1 u/ ~ l' c8 c
& L: k+ h* K- F% {$ K p
1 B E3 P* A$ O- M/ C
, Q9 e% e' _2 q+ i# V
9 i+ s2 ?* |$ z
" E: y0 Y4 E. K, w# D8 s" ]4 V) n
0 f+ n/ P$ N, p" x4 w1 v1 k" \ * F+ N K: v! F/ W, s
0 f: G8 \! W! d+ _/ N. z
& Y" H# Y7 `4 Y) C
7 R5 \9 \" V! G. d2 i7 n
* F5 h5 A8 Y% C$ q$ x: Q5 |/ S3 m" l6 ?* h/ X7 \- ~5 v; j# `
- N& h) A+ G: O) I; r, f
& f: w4 k; F$ q- u3 Q( X
, h& G8 u' `7 _) s0 o; d% F6 i1 `9 P" [ }2 U
+ u: W% r6 B! R; {* w/ ?' m( k8 E; E1 x0 u7 d* A8 D4 y9 }$ o
# u3 X& Q& ?& s) x+ Q
8 X6 {+ G1 ~6 a/ Z7 W
- a* ?8 L: \/ E: a" S p1 y. g
. m: ^4 n% }, e P
_$ f4 t# p4 f N y; @2 ^% w
5 ]; {: e% O2 g' t% K, X4 l% _
T7 L# h2 @1 \# V2 h2 p' B) o/ b) @# H
) h1 _- B$ x5 G* D8 x1 v
7 L* X ~( P$ l/ ]: X4 ]
8 l/ `/ Z# Q: l3 h7 m' S - Y8 e9 V0 }, ]; W6 J! x
海量资讯、精准解读,尽在新浪财经APP
: { M/ b6 g* H1 f( x
7 ^! ^; e) F! C' y% O# B( N4 X 0 \' Q, M2 N% I3 ]# w/ u8 A
7 x! F( C: M6 V( ~9 v! ]# Z
1 b- y9 Z7 g. n* ]( E' P
7 T% E3 F# o( o9 \
- ?6 [6 g5 T% H: ?4 a4 \ T
3 s* e, `3 V' K' R9 P I( S
责任编辑:梁斌 SF055
6 G6 I+ \; ]- h1 z+ E6 l2 o1 O
( X: ?/ c% I, L) w1 u! c o
: t9 q8 v0 T: Z