第四届中国“互联网＋”大学生创新创业大赛 亚军项目——人工智能影视制作-聚力维度

第四届中国“互联网+”大学生创新创业大赛

亚军项目——人工智能影视制作-聚力维度

在第四届中国“互联网+”大学生创新创业大赛冠军争夺赛上，来自北京邮电大学的“人工智能影视制作——聚力维度”项目，堪称影视制作“黑科技”，它可以将2D电影实时地直接转换成3D，效率提升1000倍，打破了传统3D影视制作高成本、耗时间的问题。在此次大赛中，获得亚军。

2D影片实时转换成3D

北京邮电大学的“人工智能影视制作——聚力维度”项目，利用人工智能技术实现2D影像自动转为3D影像，致力于将影视制作从手工业时代带入人工智能时代。项目负责人赵天奇一边播放3D影像，一边介绍道：“像这样达到院线级水平的3D效果，如果用人工来做，需要100个人花3个月的时间，而我们只需要一个人花一周时间。”

峥嵘平台由聚力维度的科幻成真实验室历时3年之久研发完成，主要用于画面品质达院线级标准的3D内容制作。

《阿凡达》上映之后，3D电影在大众领域从“陌生”转为“熟悉”。很多人都看过3D电影，但仅有很少人知道3D电影如何制作。主流的3D电影制作采用2D转3D方式。因为使用3D双目摄像机实拍，不仅成本高、周期长、移动不便，而且在拍摄特写、逆光、运动等镜头上也有限制。峥嵘平台的诞生则彻底颠覆了传统2D转3D技术。

用传统2D转3D技术制作一帧立体画面，是一个繁琐且耗时间的过程，要经过图像分割、灰度绘制、背景补图、渲染合成至少4个步骤。

举例来说，将一张正对镜头的面部特写图片制作成立体图片，一个人类立体设计师需要先用传统3D转制软件里的分割工具，将人物的面部从鼻尖、鼻翼、颧骨、耳根再到头发，像用ps抠图一样分别依次分割;再给分割出来的每一层依次赋予灰度值，也就是赋予单个部分立体感;然后将单张图片依据左右眼视角进行平移，并将平移后的空白部分补充完整;最后将左右视角图与灰度图渲染合成。

传统转3D面部立体手工分割工序

繁琐如此，也才仅仅得到一帧图片中一张人物面部的立体图像，更别提含有多人以及多层次背景的影视场景。

传统转3D复杂场景手工分割工序

然而，使用人工智能2D转3D平台峥嵘，则只需将这张图片上传给平台，就可以实时得到一张结构精细的立体图。

用机器做人的视觉

峥嵘平台主要基于人工智能技术，其核心是从单目图像中恢复出整个场景的三维结构。与应用在安防、自动驾驶、金融、医疗领域的目标检测或目标分割等技术相比，峥嵘平台是在用机器做人的视觉。

首先，其输出的结果是影视画面，与安防、金融、医疗等应用相比，主要服务于人类的观看体验。

其次，人眼对所观看的影视画面要求很高，并希望从中获得愉悦感。峥嵘平台输出的影视画面需要做到三维空间关系精细、稳定且漂亮。如果每张图片的立体结构不一致，合成的完整视频就有可能造成同一人物在同一场景、位置出现抖动。即便很轻微，也可能使人眩晕。但在安防或自动驾驶领域，机器锁定目标后，并不必清晰的将其呈现给人看。检测框围绕目标的轻微抖动是被允许的，只要不影响最终结果判断。

第三，峥嵘平台不仅要像人类一样能“看”到影视内容，并且要立体化影视内容中的万事万物，三维重建影视画面中的所有类别。

对于普通人来说，运用这个3D制作平台，就可以在短时间内学会制作动画，制作效果甚至可以达到院线级水平。

基于该平台的3D直播技术，能对电视剧、综艺甚至时效性强的新闻、体育赛事等进行实时3D转换。此外，3D浏览器能将所有普通网页实时转换成3D网页。除了2D转3D，聚力维度也在围绕前期拍摄、后期制作、特效动画等可以用人工智能优化甚至颠覆的影视制作方向进行研究，致力开创人工智能影视制作新纪元。