- e5 {1 z$ N! p1 q% O5 Z ; P8 w6 i/ p/ K. I5 r
- p5 B: C. z( B8 k. p
, n7 A' r n" q }) B3 w! T
5 t& |& {7 P g# h
0 y( M- k% e z1 o- E * I/ o$ L* l. M
; E+ J4 S& G% {/ V5 q6 l5 ^' s) M 0 \. v/ D: s: |" c( O
I D8 H/ S9 I6 p. F2 w3 @9 B/ G9 d7 l; M" @0 y! Y, M f
1 |8 h3 V! L* h+ M 6 R! U9 h2 f' P$ G& ?4 Z
9 v0 d8 m+ Z. v$ O, ] : J9 q4 N- W! V& j
- I& R7 N0 s. G
2 J# h& D9 P0 m3 T
E6 M" W2 K( o! J. h. f
# l; ]+ l& ^8 D) t& d
% N$ H. _( ]% f; |/ L3 F+ A9 K( f: r f% Q4 v# V; n' o+ r& ?8 I5 v
新特效火爆抖音!各路神仙齐唱《蚂蚁呀嘿》,网友:短短几秒需一生来治愈
1 w' m$ H! B0 t2 ?- k8 c3 l 金磊 杨净 发自 凹非寺
7 i, }6 B1 q' ~4 F! }/ h: Z
量子位 报道 | 公众号 QbitAI
8 X) c3 c+ ?$ P" `
当互联网大佬们集体唱歌,会擦出怎样的火花?
- f: A& _! Z3 \7 O) `" k4 F+ }
现在,火爆抖音的AI特效,一键就可以实现梦幻联动。
9 N% }/ I- o3 V- N0 z4 I( k+ B
瞧!马云、马化腾、马斯克等大佬们,正在集体演唱神曲《蚂蚁呀嘿》。
& \$ l; _) Y+ n+ U* J
不光演唱,表情也是十分的卖力(傲娇的小眼神很是传神啊)。
0 T2 E! \' H" H( b) F, {0 u
Y3 }6 m! G& b0 M! t
完全看不出是被迫的样子呢。(手动狗头)
5 m3 Q( F, V9 h7 t) }
效果之魔性,引得网友直呼:
& c2 J; m2 O8 A
8 u8 c- w1 a! w0 j' H
短短的几秒,要用一生去治愈…..
& a" _+ z' R0 Z
) ` P* E/ }6 D$ G1 d( W
还有网友表示,最近是咋滴啦?!一打开抖音,好像捅了蚂蚁窝。
0 \/ C( \( O' ~5 [/ _- ^7 Y
$ r1 Y- o. N5 R( \+ M% Y. r
温馨提示:听音乐读本文,效果更佳哦!
& I5 `: X: Y8 r 大家一起《蚂蚁呀嘿》!
' l: b/ g* z2 H) ~& T 这款AI特效,只需要一张照片,就可以火速让anyone“蚂蚁呀嘿”。
0 b8 U( e/ @, u' l 正因为这么便捷,果不其然,马上成为了抖音网友们的“新宠”。
; v& P9 a4 h5 `# { 各路名人开始搞起!
3 Y7 A4 I5 e6 t+ E" Q3 ~; }& U2 { 首先登场的是四大天王:刘德华、张学友、郭富城和黎明!
3 T, M1 w8 \; y5 j0 g' U
8 \( b& E$ ~1 u, A3 O: X 或许天王们太久没有同框过了,网友们用这种方式将他们“召集”在一起,也是别有一番风味。
7 ^! k8 L. u3 ^$ L
“永不过时”的《还珠格格》,也赶上了这趟潮流列车。
1 j9 F, W u% a7 M) O3 J9 }9 r! e- x. I+ w. A+ X7 z' Z4 \; V
王者峡谷里的英雄们,网友们也是没有放过。
' u' L+ h- A+ W$ s4 ~) d
不得不感慨二次元的颜值,不论怎么恶搞、变形,还是能保持俊美的样子(程咬金除外)。
& Z8 X+ m2 O- A2 j
# |9 j: {+ h! j1 c
除了上面这种九宫格模式外,高端的操作还可以实现集体同框。
6 j5 r7 k5 O9 ]
于是,“爱玩”的德云社就以这种方式亮相了。
9 Y0 V; B! G a) h# u# G9 Q4 @% q3 F; U# [: D& M' A3 H
不知道是不是因为特效太过逼真、还是脖子有点短(不是),竟然还有人以为是真的。
$ i1 N4 M$ D) _1 v
: o5 O8 ^( D/ o4 A- ?第一眼我以为是特效。
- t( t. \- a& [" h5 W
% v. ]* q4 R8 I1 Z; E6 K. y- ~: f% g+ ?- s1 a6 b
当然,此等名场面,怎么少得了量子位本位!集体《蚂蚁呀嘿》表演,隆重登场!
# ?" c7 v4 L( i( G9 g
% w8 v. I+ S) W* ]) _
OK,各种效果、各种玩法已经展示完毕。
5 @) A! d: t" B. ]
接下来,是时候上手实操了!
+ F5 }6 l3 W4 x! ?# L, k 如何制作专属的“蚂蚁呀嘿”?
- |( L* g9 Z3 \: l3 o
首先需要准备三个工具:
' M) \9 Q% X! b5 s" M Avatarify、任意一款加速器APP、剪映(可有可无)。
4 @- f& |6 W$ z8 @
* _! C, h/ O- ]2 U! o 第一步,打开加速器,启动加速模式。
: ~! @' K8 L9 |+ r+ p/ |+ R9 h/ Z2 G; K
第二步,打开这款软件Avatarify,选择一张照片即可进入选择特效页面(脸正一点食用效果更佳)。
6 I8 G, I# @3 Q/ r# n 然后向下拉,找到布拉德·皮特的特效即可。
- |$ |) M2 I4 [ V' @) K% E- u
; R% W$ a7 S! z1 I" x9 Q; m 是不是很简单?
. \) A' F' F1 Z m) Z
不过有点遗憾的是,暂时只有苹果手机才OK(安卓用户泪目)。
1 B/ K. v5 D/ A I
6 R4 V/ m% Q5 [ 一个人演唱“蚂蚁呀嘿”的效果就已经实现了。
4 u+ T2 ~5 a$ X; [2 }9 V! z
如果想要多人演唱、九宫格那样式儿的,那就需要剪映来加持了,这里就不详细展开了。
; `. w1 j) K) z 当然,这款软件除了《蚂蚁呀嘿》之外,还有很多模板可选。
2 d& c# l/ W- e: ~- y7 k& I% P
- q: b( j) R! e) B9 Z' {& n 例如,李开复老师便友情上演了一首《Only You》。
$ j) W& J& l }# X0 s7 u& ~
# v4 ^. H# I' @/ h
随着这波潮流,Avatarify及其他相关软件,已经超过微信、拼多多、抖音的下载量,登顶苹果App Store免费榜“前三甲”!
# o, ~8 _ y4 [0 T4 o* R' {
9 Q! d. s* x0 I8 m+ Q 什么原理?
1 c1 I$ K2 _9 U" \ A 那么问题来了。
; C2 q Z, o" m2 l2 m! Q
AI,是如何搞定各位大佬来唱歌的呢?
8 X8 U1 g1 }; P% @ 让一张照片动起来,人脸跟着音乐一起挤眉弄眼,需要一个叫做一阶运动模型(First Order Motion Model)来搞定。
% d* H B6 v3 a. K5 U6 |
技术原理借鉴了去年意大利特伦托大学的一项研究,入选了NIPS 2019。
. N0 R7 N4 K( u( w" ~5 \
1 d4 x/ b" [4 d" O 当时的例子是这样的。
' k8 Y2 S3 O q1 p1 |
z( ~# ?- t9 z1 x9 M& N& H 以川建国同志为参考,来自《冰与火之歌》的演员照片瞬间做到了神同步。
9 v6 f0 D- b; ]1 Y; ~, } 不光是脸动,一个模特换pose、奔腾的马也都不在话下。
, |7 J7 e- j0 `
+ F5 h4 I0 o' Y, C* ~ 模型框架主要由2部分构成,运动估计模块和图像生成模块。
8 c4 n3 k% u) T) K& j; x1 y
运动估计模块的目的,是预测一个密集的运动场。研究人员假设存在一个抽象的参考框架,并且独立估计两个变换,分别是‘从参考到源’和‘从参考到驱动’,这样就能够独立处理源帧和驱动帧。
6 P4 i/ ^( N" A0 p( n; T& O ? 而这两种变换,通过使用以自监督方式学习的关键点来获得。利用局部仿射变换对每个关键点附近的运动进行建模。
0 S z! d, g! r# Q% `/ W
% A3 U1 \' T9 ~) _& W1 u 随后,密集运动网络结合局部近似得到密集运动场。
. y/ n( _' x. c" p
这个网络还能输出遮挡的mask,指示哪些图像的驱动部分可以通过源图像的扭曲(warping)来重建,哪些部分应该被绘制(根据上下文推断)。
* J8 i6 e3 z. ~* N
在生成模块按照驱动视频中,提供的源对象移动的图像进行渲染。
* ?( s; y5 ~3 v6 v1 f; g4 u& v4 F
此处,研究人员还使用一个生成器网络,根据密集的运动对源图像进行扭曲,并对源图像中被遮挡的图像部分进行着色。
' h. d5 Y. q' | 训练阶段,研究人员采用了大量的视频序列集合来训练模型,这当中包含了相同类别的对象。
( u, ]7 G$ X6 S6 k4 C; ?- C3 @6 I
( w0 x4 t7 k. h: Y 随后在测试阶段,研究人员将模型应用于由源图像和驱动视频的每一帧组成的对,并执行源对象的图像动画。
" e0 u% X- W- g
最终在质量评估中,这一方法在所有基准上都明显优于当前先进技术。
1 [6 h: c. X$ G5 Z
& P% H# ]5 n2 Q0 o$ g, b 此前类似研究也很火爆
/ [ y" N: J' ^: q/ o% ?. q2 j 这种AI特效能够如此火爆,甚至“破圈”,让大家玩得不亦乐乎,最主要的原因是方便——不需要任何编程知识,便可完成。
( U) k. _4 r0 F. {
但在此之前,其实这种AI特效在圈里也是有火过,但都需要一定的计算机能力才可以实现。
* x: B s+ Q6 t$ H; ~) O+ o1 Q& G
比如,一张名人照片和一个你说话的视频,就可以让梦露学你说话。
% w+ D, M- U* N) X/ p1 a2 m& h* T
R! J# l* `& C; ?+ \ 还有,印度程序员开发的实时动画特效。你一动,蒙娜丽莎(36.570, -0.37, -1.00%)跟着你一起动~
/ l+ ~' [: |- |# R5 w- ~' N
! D) n% i0 W" v8 F( L0 r 那么现在,你被“蚂蚁呀嘿”洗脑了吗?
E2 d' G8 ?& B; g! D0 n
4 y9 R& ~, U' e/ i; G) }: o( b9 s1 k" V% ?
3 R" c( j8 z9 ?* B1 G) z
8 s0 y; G# ` g- P4 U+ r" v" I: B0 l; q+ e" n& x! {6 `
. k5 K3 b/ C. u. a3 n, F$ V
; r7 S8 c6 m' N. T# _: `% I; ?
6 |4 G# _8 j+ m / ~( n8 f5 v6 h- S6 a3 ~+ ?; B
$ G4 t9 K- D5 N5 Q 1 {0 Z/ b4 |2 P# i) f- j7 \) v
: b: C. }9 p0 G; Z% z . B4 R! w: H" ~! y
\7 U( L( @: l* O8 _9 O8 ~
( W" \" X" m2 W' ?
1 M3 n. k: v J
$ y! f* w2 i$ F$ y1 c( S
P. ?0 }+ b2 \0 T5 z' x
( M% Z! S( D8 i( A9 }0 T
$ G; F9 V& ~( m- z, a$ B* ?5 l3 o6 B) y
$ W# ^8 r) r: D7 {
; p; [# M) r6 O6 W3 l* j i; @) ^
8 V, j4 o6 `" B3 z% M' C
" Y! p* @9 E- j2 U3 @4 N/ v. L
* l( |7 S, O. v, G/ y3 n7 ^" }
8 U2 L0 b8 f% W2 L1 J6 i4 @) e
9 ?) q9 _9 A' `5 u) S: V
1 ]+ }. y, ^! A3 U % L+ u+ f; ?! K, w
) L6 `) R' H P, Y8 K$ h' M ; e2 d5 U. f9 f/ Z+ J& Q/ S
海量资讯、精准解读,尽在新浪财经APP
, d" B _& U# C2 l8 X
/ H" f! \+ v( ^3 D9 c * M# ]7 H: {# N2 _' m8 b
& P' r2 p' L7 d, D
# u7 K7 M) g0 F
1 Q1 C. {( d p2 a3 y
: Y9 n5 A+ h h2 W7 b! r : x5 h# F+ a. j0 R1 R2 `
责任编辑:梁斌 SF055
8 o' W! z: E- E
9 Z& T, m$ u: N7 {6 b: T$ N. r) c1 ~! f* p5 A$ ~" C; ^" @$ G! Q5 `