AI 科技评论按:这里是,雷锋字幕组编译的 Two minutes paper 专栏,每周带大家用碎片时间阅览前沿技术,了解 AI 领域的最新研究成果。
原标题:AI-Based Animoji Without The iPhone X
翻译 | 廖颖 字幕 | 杨青 整理 | 李逸帆 凡江
本期论文:Avatar Digitization From a Single Image For Real-Time Rendering
每周一篇2分钟论文视频解读
本期的两分钟论文是介绍使用 AI 技术来实现 iPhone X 上功能——Animoji。自从 iPhone X 面世以来,这项功能受到很多人的喜爱。它可以轻易地模拟你的表情,用 emoji 里的图案来表现,看起来实在是妙趣横生。这项功能是如何实现的呢?它使用的是点阵投影器(Dot Projector)来捕捉、理解人脸的几何特征。
现在问题来了,假设我们不使用这项技术,如何能达到 Animoji 的效果呢?AI 可以帮我们做到。很简单,你甚至不需要上传一段视频,仅仅一张图片作为输入,就可以训练神经网络来制作实时动作的动画图像,听起来很有趣吧?
在训练过程中,可以看到,图像包含一些基本的元素:眼睛、牙齿、舌头、牙龈。但是这样其实是不够的,为了让图像更生动,还需要用户的外貌和姿态。有意思的是,头发的部分不是像之前的技术那样,一根一根地生成,因为这样实在是太耗时耗力了。
这一切究竟是如何实现的呢?首先,我们将图片分割为面部和头发两个部分,然后将头发部分放入神经网络,试图去提取一些特征,例如头发长度、刺头等资讯,判断是否丸子头、马尾,找出发际线位置。这个神经网络非常深,大概有50层左右,训练用的素材多达 4 万张。
下一步,我们使用一种多视角的方式来展现完成之后的图像,这项技术可以重新定位,也就是说,我们的姿势可以转换到不同的特征。这个训练的模型受光照的影响不大,在各个光照条件下都表现优异。是不是超赞?
现在脸部建构技术愈来愈丰富了,看着《头号玩家》,虽然目前展现的虚拟头部还没很精细,但离在虚拟世界生活的距离是不是愈近了呢?
论文原址 :
http://www.hao-li.com/publications/papers/siggraphAsia2017ADFSIFRTR.pdf
更多文章,关注 AI 科技评论。添加雷锋字幕组微信号(leiphonefansub)为好友,备注「我要加入」,To be an AI Volunteer !
对了,我们招人了,了解一下?
限时拼团---NLP工程师入门实践班
三大模块,五大应用,知识点全覆盖;海外博士讲师,丰富项目分享经验;
理论+实践,带你实战典型行业应用;专业答疑社群,结交志同道合伙伴。
领取专属 10元无门槛券
私享最新 技术干货