文章相关引用及参考:映维网
虚拟化身能够栩栩如生地弹奏乐器
(映维网 2017年12月30日)Facebook的人工智能(AI)研究团队想到了一个巧妙的方法,让AR/VR中的虚拟化身能够栩栩如生地弹奏乐器。
在一份新发表的论文(点击下载)中,Facebook的研究科学家Eli Shlizerman、Ira Kemelmacher-Shlizerman以及协作者Lucio Dery、Hayden Schoen共同探讨了,他们如何通过国外视频网站YouTube上的钢琴和小提琴演奏视频来训练AI系统。他们利用该AI系统来指导虚拟化身进行表演,基于录制的音频在虚拟的乐器上移动手和手指,实现虚拟化身“实时音乐演奏”的效果。
Facebook的研究科学家在YouTube上传了一个说明及演示视频,在Facebook的社交VR应用“Spaces”中演奏。他们说:“我们坚信,音频与人类形体直接的关系,在广泛的AR/VR应用以及认知上具有极大的前景。”
领取专属 10元无门槛券
私享最新 技术干货