Loading [MathJax]/jax/output/CommonHTML/config.js
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >眼见未必为实,Deepfake又来"作妖"了,发福“钢铁侠”,AI换脸好莱坞明星圆桌对话不忍直视!

眼见未必为实,Deepfake又来"作妖"了,发福“钢铁侠”,AI换脸好莱坞明星圆桌对话不忍直视!

作者头像
CDA数据分析师
发布于 2019-11-25 08:40:56
发布于 2019-11-25 08:40:56
1.5K0
举报
文章被收录于专栏:CDA数据分析师CDA数据分析师

编辑:张佳

本文转自公众号:新智元

【导读】被发福的“钢铁侠”吓到了!近日,一个好莱坞明星圆桌对话的Deepfake视频刷爆了油管。整个对话行云流水,只不过“双下巴”的小罗伯特·唐尼和瘦弱的汤姆·克鲁斯让人感觉怪怪的。原来,视频使用名人模仿者提供名人的基本举止表现和声音,然后通过Deepfake覆盖脸部伪造。

昨天晚上,闺蜜发来一个视频把我吓了一跳。视频中,偶像小罗伯特·唐尼竟然发福了!

这怎么可能!后来我才知道,这是人家Deepfake的一个视频,把视频中人物的脸和声音替换了。

除了小罗伯特·唐尼,汤姆·克鲁斯、乔治·卢卡斯、伊万·麦格雷戈、杰夫·戈德布鲁姆这些好莱坞明星都被Deepfake了,还组了个圆桌会议:(整个视频只有主持人是本人)

视频中,大家比较熟悉的“钢铁侠”小罗伯特·唐尼明显发福,双下巴都出来了;“返老还童”的汤姆·克鲁斯太瘦弱,这哪里是碟中谍里那个玩命的阿汤哥?而且,他们的声音听着也很奇怪:

这个视频引发了网友热议,很多人被这个以假乱真的视频惊到了,搞不清到底谁是真的、谁是Deepfake。

自从拯救宇宙以来,Stark似乎吃了太多的芝士汉堡。

整个过程中我都像汤姆·克鲁斯一样大笑。

无论是谁在扮演杰夫·戈德布鲁姆和汤姆·克鲁斯,太赞了!

想象一下20年前、甚至10年前把这个给别人看,他们会很困惑的。

技术出神入化,Deepfake前后对比

这个Deepfake视频由一个名叫Collider的电影网站制作,他们使用名人模仿者提供名人的基本举止表现和声音,然后通过Deepfake覆盖脸部,这样伪造的视频乍一看很让人信服。来见识一下伪造前后对比:

现在Deepfake就能做到这样的水平了,再过两年会不会肉眼根本无法分辨?

“出道”3年火遍全球,Deepfake被玩坏了

其实,Deepfake并不是非常新鲜的技术了,它已经存在了将近三年,并且变得越来越容易。此前便有朱茵变杨幂,海王变徐锦江的相关报道。

《射雕英雄传》中,朱茵变杨幂

海王变徐锦江

Deepfake真正走进大众视野是在2017年年底。当时Reddit用户将《神奇女侠》的女主角盖尔·加朵、以及艾玛沃森、斯嘉丽等众多女明星的脸跟AV女优进行了交换,制作出足以以假乱真的爱情动作片。

国内也有过银幕上的换脸。在2017年科幻喜剧《不可思异》中,当时由于演员的原因,片方不得不临时换角,由大鹏代替杜汶泽所有戏份,进行了一次“特效换脸”手术。

但这次换脸,是用通过纯手工的方式一帧帧地修改画面,耗时将近6个月,才将影片中所有的镜头都换完。在价格上,可以说是“一秒千金”。

AI换脸和后期换脸有着根本区别。后者还需要各种建模,以及一桢一桢的修改,前者在操作上只需要提供足够多的素材让机器学习

另外,目前以fakeApp为代表的应用存在分辨率低、效果不稳定、渲染时间长的问题。QuantumLiu介绍,用AI和特效技术解决连续针断点再融入难题,one shot面部自适应,机器自主学习光感和画面匹配度,每一次的训练都会自动叠带,成功率,效果和渲染速度大幅提高,动态视频的切换更加完美的匹配。目前已经取得了高分辨率光感匹配的突破和叠加式渲染的突破。已经可以在几个小时内完成一整部片的替换,而且计算机学习的速度越来越快,时间周期还在不断的缩短,品质不断提高。

如何做到的?Deepfake技术详解

Deepfake 使用生成对抗网络(GAN),其中两个机器学习模型进行了较量。一个ML模型在数据集上进行训练,然后创建伪造的视频,而另一个模型尝试检测伪造。伪造者创建假视频,直到另一个ML模型无法检测到伪造。训练数据集越大,伪造者越容易创建可信的deepfake视频。

上图显示了一个图像(在本例中是一张脸)被输入到编码器(encoder)中。其结果是同一张脸的低维表示,有时被称为latent face。根据网络架构的不同,latent face可能根本不像人脸。当通过解码器(decoder)时,latent face被重建。自动编码器是有损的,因此重建的脸不太可能有原来的细节水平。

程序员可以完全控制网络的形状:有多少层,每层有多少节点,以及它们如何连接。网络的真实知识存储在连接节点的边缘。每条边都有一个权重,找到使自动编码器能够像描述的那样工作的正确权重集是一个耗时的过程。

训练神经网络意味着优化其权重以达到特定的目标。在传统的自动编码器的情况下,网络的性能取决于它如何根据其潜在空间的表示重建原始图像。

训练Deepfake

需要注意的是,如果我们单独训练两个自动编码器,它们将互不兼容。latent faces基于每个网络在其训练过程中认为有意义的特定特征。但是如果将两个自动编码器分别在不同的人脸上训练,它们的潜在空间将代表不同的特征。

使人脸交换技术成为可能的是找到一种方法来强制将两个潜在的人脸在相同的特征上编码。Deepfake通过让两个网络共享相同的编码器,然后使用两个不同的解码器来解决这个问题。

在训练阶段,这两个网络需要分开处理。解码器A仅用A的人脸来训练;解码器B只用B的人脸来训练,但是所有的latent face都是由同一个编码器产生的。这意味着编码器本身必须识别两个人脸中的共同特征。因为所有的人脸都具有相似的结构,所以编码器学习“人脸”本身的概念是合理的。

生成Deepfake

当训练过程完成后,我们可以将A生成的一个latent face传递给解码器B。如下图所示,解码器B将尝试从与A相关的信息中重构B。

如果网络已经很好地概括了人脸的构成,那么潜在空间将表示面部表情和方向。这意味着可以为B生成与A的表情和方向相同的人脸。

请看下面的动图。左边,UI艺术家Anisa Sanusi的脸被从一个视频中提取并对齐。右边,一个训练好的神经网络正在重建游戏设计师Henry Hoffman的脸,以匹配Anisa的表情。

显然,Deepfake背后的技术并不受人脸的限制。例如,它可以用来把苹果变成猕猴桃。

重要的是,训练中使用的两个主体要有尽可能多的相似之处。这是为了确保共享编码器能够泛化易于传输的有意义的特性。虽然这项技术对人脸和水果都有效,但不太可能将人脸变成水果。

参考链接:

https://www.theverge.com/tldr/2019/11/18/20970280/deepfake-roundtable-impersonation-collider-tom-cruise-jeff-goldblum-robert-downey-jr

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-11-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 CDA数据分析师 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
发福“钢铁侠”、返老还童阿汤哥,Deepfake好莱坞明星圆桌对话不忍直视!
这怎么可能!后来我才知道,这是人家Deepfake的一个视频,把视频中人物的脸和声音替换了。
新智元
2019/11/26
9200
发福“钢铁侠”、返老还童阿汤哥,Deepfake好莱坞明星圆桌对话不忍直视!
Deepfake首次参与战争!乌克兰总统被伪造投降视频,无奈推特辟谣
大数据文摘出品 俄罗斯和乌克兰冲突尚未结束,网络中也还硝烟弥漫。 近日,一条乌克兰总统弗拉基米尔·泽连斯基(Volodymyr Zelensky)的“视频”被广泛传播,在视频中,泽连斯基呼吁乌克兰士兵放下武器。 从视频来看,泽连斯基的脸显得很不自然,文摘的老读者应该很快能辨认出来,这明明又是一款用Deepfake做的换头“视频”。 这条视频周三被黑客放到乌克兰一家被黑的新闻网站上,随后被揭穿和删除。 只不过,因为这条视频在推特上传播的也很广,观看人数超过25万,泽连斯基本人也在推特发文辟谣。 乌克兰国防情
大数据文摘
2022/03/24
1.6K0
【热点】你真敢ZAO吗?解读换脸AI “细思极恐” 的用户协议
8月30日晚间,一个名为“ZAO”的APP一夜爆红,有的人尝鲜乐此不疲、有的人则对其中涉及到的隐私问题忧心忡忡。到了第二天,这个APP已经被推到了舆论的风口浪尖。
昱良
2019/09/06
1.3K0
【热点】你真敢ZAO吗?解读换脸AI “细思极恐” 的用户协议
AI“复活”张国荣,逝去16年哥哥又重生!
4月1日愚人节,也是张国荣的忌日。今天,在哥哥张国荣离开的第16个年头,有网友用AI让张国荣“复活”,并且演唱了经典歌曲《千千阙歌》、《玻璃之情》。
新智元
2019/05/08
1.1K0
AI“复活”张国荣,逝去16年哥哥又重生!
业界 | AI 让朱茵秒变杨幂,但我拒绝成为波多野结衣
我就说吃瓜群众平常要多关注科技新闻,一个在科技界已经诞生了一年多的“老技术”Deepfake 居然因为“明星换脸”的视频火出了圈。
AI研习社
2019/03/14
1.7K0
业界 | AI 让朱茵秒变杨幂,但我拒绝成为波多野结衣
Deepfake被玩出圈!有人用它模仿俄罗斯反对派人物,在Zoom上“调戏”欧洲议员
他们收到了一些“俄罗斯反对派人物”的视频会议邀请,还煞有其事地讨论了克里米亚问题之类的政治事务,结果发现在这些所谓的“俄罗斯反对派人物”都是别人用Deepfake换脸假冒的。
大数据文摘
2021/05/27
2.1K0
Deepfake被玩出圈!有人用它模仿俄罗斯反对派人物,在Zoom上“调戏”欧洲议员
解密Deepfake(深度换脸)-基于自编码器的(Pytorch代码)换脸技术
还记得在2018月3月份火爆reddit的deepfake吗?将视频中的头换成另一个人的头像,虽然可能有些粗糙和模糊,但是在分辨率不要求很高的情况下可以达到以假乱真的效果。
老潘
2019/01/23
4.5K0
教程 | 如何使用DeepFake实现视频换脸
机器之心发布 作者:冯沁原 不久之前,AV 视频换脸明星的 DeepFake 火了。这篇文章将一步步教你如何实现换脸。 如果你是第一次听说 DeepFake,一定要点击上面的视频,亲自感受一下尼古拉
机器之心
2018/06/08
10.3K1
AI换脸ZAO一晚,成本烧掉几百万
8月30日上午10点半左右,正在使用ZAO的用户发现,想要生成一段新的AI换脸视频,已经不是等待几秒、排队第几位的问题,而是——
刀刀老高
2019/09/03
4.5K0
AI换脸ZAO一晚,成本烧掉几百万
DeepFakes深度造假,AI换脸的技术原理是什么?
DeepFakes深度造假实际上是一种人脸交换技术,顾名思义,也就是在图像或视频中把一张脸替换成另一张脸。事实上,人脸交换技术在电影制作领域已经不是个新鲜词了,但是之前电影视频中的人脸交换技术非常复杂,专业的视频剪辑师和CGI专家需要花费大量时间和精力才能完成视频中的人脸交换。
全栈程序员站长
2022/09/01
3.3K0
DeepFakes深度造假,AI换脸的技术原理是什么?
“跨国视频造假窝点”曝光!这个大规模数据集,帮AI揪出99%换脸视频
deepfake,视频造假神器,把一个人的脸庞,转移到另一个的身上,让假新闻轻松传播到全网。
量子位
2019/03/08
1K0
“跨国视频造假窝点”曝光!这个大规模数据集,帮AI揪出99%换脸视频
AI 换脸术「Deepfakes」进化简史
来源 | Maximilian Schreiner 译者 | 核子可乐 策划 | 刘燕 AI前线
公众号机器学习与AI生成创作
2022/10/31
4.7K0
AI 换脸术「Deepfakes」进化简史
AI 换脸用来拍“大片”??
最近云毕业正当时,各家科技公司顺势推出了自己的 AI 换脸技术,结果又被同学们玩坏了!
小林C语言
2020/09/08
4.4K0
AI 换脸用来拍“大片”??
DeepFake换头术升级:浙大新模型,GAN出一头秀发
---- 点击上方↑↑↑“OpenCV学堂”关注我来源:公众号 新智元 授权 【导读】虽然DeepFake能令人置信地换脸,但没法同样换好头发。现在浙大与瑞典研究者都扩宽思路,用GAN或CNN来另外生成逼真的虚拟发丝。 DeepFake技术面世的2010年间末叶,正好赶上了川普时代。 无数搓手打算用DeepFake来好好恶搞大总统一下的玩梗人,在实操中遇到了一个不大不小的障碍: 各家DeepFake类软件,可以给图像换上金毛闯王的橙脸,但那头不羁的金发实在让AI都生成不出令人置信的替代品。 看,是不是
OpenCV学堂
2022/04/24
5320
DeepFake换头术升级:浙大新模型,GAN出一头秀发
百万级像素Deepfake降临,明星要失业?不!反而更香!
保罗.沃克在《速度与激情7》的拍摄途中不幸出车祸去世,这一度给当时电影的正常上映蒙上了阴影。但是后来大家都知道,不仅电影在延期上映之后火遍了全球,而且我们在荧屏上惊喜地看到保罗还“活着”!
AI科技评论
2020/07/03
7250
我试了下《复仇者联盟》AI换脸系列,当了英雄的我现在很慌...
《复仇者联盟4:终局之战》上映已经有一段时间了,内地累计票房便已突破20亿。电影精彩之处离不开钢铁侠、雷神、美国队长等各位超级英雄的实力支撑。
大数据文摘
2019/05/13
1.8K0
我试了下《复仇者联盟》AI换脸系列,当了英雄的我现在很慌...
求职者可能是假货?冒名者用deepfake盗窃身份应聘远程工作,FBI:说话时能识别
大数据文摘出品 作者:Caleb 在线工作正在逐渐正式进入我们的生活。 根据数据公司Emsi Burning Glass统计,2020年初纽约全市16万3000个招聘岗位中,只有6700个允许在线工作,占总岗位数量的4%;但到去年12月,全市24万3000个招聘岗位中,在线工作的岗位数量增至2万5800个,已占到总岗位数量的10.6%。 不过俗话说得好,人心隔肚皮,更何况现在还多隔了一层屏幕,谁也保不准Neso事件不会再次发生。 这不,最近根据美国联邦调查局调查,越来越多的人正在窃取别人的个人身份信息,以及
大数据文摘
2022/07/12
2820
求职者可能是假货?冒名者用deepfake盗窃身份应聘远程工作,FBI:说话时能识别
秒杀Deepfake!微软北大提出AI换脸工具FaceShifter和假脸检测工具Face X-Ray
最先进的AI和机器学习算法不仅可以生成栩栩如生的位置和物体的图像,还擅长将人脸头像从一个人换成另一个人的。另一方面,研究人员也在不断开发能够检测deepfake假图像的识别工具。这场在机器学习图像识别领域的“矛与盾”之争愈演愈烈。
新智元
2020/02/13
2.6K0
AI 换脸技术——DeepFakes 概述(一)
本文由图普科技编译自 Exploring DeepFakes。 2017年12月,一个名为“DeepFakes”的用户在Reddit上发布了一个“假视频”,视频中的艺人其实是后期加上的,但是看起来几乎毫无破绽。他利用了深度学习和AI新技术,在成人电影中把演员的脸替换成某个艺人的脸,从而制作成了这个看上去以假乱真的视频。 从视频发布以后的好几个星期,网络上不断有人发表文章和报道,抨击这一“换脸”技术,称这种技术将会对社会产生很多负面的影响。比如说,这个“换脸”技术会给很多无辜清白的人(像那些无故出现在成人电影
刀刀老高
2018/04/24
7.2K0
AI 换脸技术——DeepFakes 概述(一)
【认知计算】Deepfake/Anti-deepfake综述探究
2017年12月,一位名为“Deepfakes”的用户在全球流量排名第四的国际互联网社区“Reddit”上发布了一段好莱坞女星盖尔·加朵的伪造人脸视频,掀起了一阵轰动,这一事件作为开端,标志着人脸深度伪造技术的兴起,而该用户的用户名也被引用成为了这一类技术的代名词“Deepfake[1]”。 因此,Deepfake指代人脸的深度伪造,即将目标视频人物的脸替换成指定的原始视频人脸,或让目标人脸重演、模仿原始人脸的动作、表情等,从而制作出目标人脸的伪造视频。
zstar
2022/06/08
2.1K0
【认知计算】Deepfake/Anti-deepfake综述探究
推荐阅读
相关推荐
发福“钢铁侠”、返老还童阿汤哥,Deepfake好莱坞明星圆桌对话不忍直视!
更多 >
交个朋友
加入腾讯云官网粉丝站
蹲全网底价单品 享第一手活动信息
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档