新知第二期 01 虚拟世界原创

大家好，我是腾讯云TRTC的产品经理张，今天和大家分享的是虚拟世界互动的新场景以及其应用方案。那么今天的分享分三个部分，先带大家了解一下互动应用的发展趋势，第二个部分是虚拟互动的新场景的探索啊，有哪些具体的应用和新的场景，第三个部分是最后我们提出的虚拟世界的解决方案。先带大家了解一下互动应用的，首先在发展趋势上，我们最早看到的这个所谓原宇宙的概念啊，其实是开启了人们对虚拟世界的无限想象啊，包括头号玩家这部影里给我带的绿的沉浸式体验虚拟世界啊，到现在啊，QQ腾讯QQ推出的超Q秀，为自时代用户带来的全新的数字形象啊，以及像Facebook也是O了元宇宙来打造这样的虚拟生活和办公的空间。所以说随着这个发展，其实也也是可以看到在2010年的图文消息进化到2016年的互动直播的大展啊，到2020年疫情的爆发以来啊，逐渐推出的一起啊共享体验的场景，最后到202年逐渐丰富的虚拟世界的玩法和场景啊，提供了更丰富的虚拟形象空间和多人连麦的能力。

那其实这是呃，场景的进步，也是伴随着底层的技术的突破。那么那用户的体验呢，也从最早的在线变成了现在的在场，可以更好的分享自己的体验，比起一串文字来说啊，能够时时彼此听到，哈哈哈，这样的分享的快乐啊，是比表情包或者是图文更有。感染力的。那么在场景上，我们看到最早其实是从游戏发展过来的啊，逐渐扩展到社交和泛娱乐场景，然后到线上的活动，在线的展会啊，以及办公协作的场景，也都有看到虚拟世界的应用，最后我们也会期待看到全场景的应用，这样的头号玩家的场景会能够啊尽早的到来。

那么在新场景探索方面，我们先看到的是语聊上的升级，比如像说像so这款APP，它是一个传统的语聊的场景，但是呢，它的定位叫create together，也就是大家一起去创建这样的一个小世界，但是大家可以看到这个世界其实非常非常简单的都是啊用户的头像啊，加上这些简单的emotion表情，就可以去快速的搭建自己的一个啊私人空间，或者说虚拟空间，红色砖块，蓝色砖块就搭起了一个舞台，麦克风就是开麦的位置，那这样可以让用户更有参与感，又有一个非常低成本的快速加入的虚拟空间的形式。那像chat这样的场景呢，它会在啊语聊的空间里面加上虚拟的遥感啊，并结合空间音频的效果，那我用户在通过遥感操纵我的这个小人走来走去的时候，再根据虚拟空间内的相对位置就可以听到，比如说Lisa啊。

听到这个一号的人是在他左前方，听到这个人是在他后方，并且他呃向右越走越远的时候，可以听到其他的声音，其他人的声音也是越来越小的一个衰减的效果。那这也是3D空间音频在这个语聊场景向虚拟空间升级的一个啊技术应用。那其他的场景，比如说第二个我们带来的是视频派对啊，可以看到h me这样的，呃，应用是和之前的派对玩法是非常相像的，只是他现在把它全部换成了虚拟的形象，通过面部去驱动这个虚拟形象的表情随动，然后以这样的形象来进行社交，能够大大的降低用户开麦的这个心理压力啊，并且用户之间还可以结合以前有的啊，你画我猜啊，馈子答题这样的玩法啊，去实现这个视频派对的娱乐性，那像国内我们有看到像so这样的场景，和它略微有一些思上的不一样，它主要是一个脸，你把面部盖住，然后其他的身体啊，还有。

包括背景啊，都还是正常的这个现实世界啊，有一个虚实结合的这样的效果和概念啊，以这样的形象去做社交和破冰，那在3D虚拟社交这样这样的玩法内呢，我们有看到像缓缓星球啊，啫喱这样的啊，新出现的APP，那完全是以一个虚拟的3D的avatar形象来在这个世界里面去走来走去，走到人群，人群中就会自动开启一段对话，这样很自然的啊。虚拟社交的空间场景，那包括像啫喱也是，呃，自2019年首个在应用商店的社交分类下的下载量超过微信的应用，也可以看到它在当时的火爆啊，以及市场和用户对于这样一款虚拟空间的社交的APP的期待。那在像2D虚拟世界这样的玩法，我们有看到像啊也是海外最近融资融的非常快的一个应用，它是一个2D像素风的虚拟空间的场景啊，也包含了像走到人群中就会自动开启摄像头，并且加入对话这样的玩法，那整个世界也是支持自定义编辑的，比如说这边是啊火堆，这边是这个。

音乐区，钢琴区这边是啊，棋牌娱乐区等等啊，整个世界都是可以完全自定义区编辑的，那在这个基础上就可以实现各种各样的场景，包括教育里面的场景，包括啊公司的团建啊，还有在线的各种活动都是可以去完成的。那在呃另外一种，除了像素风以外，我们有看到像呃腾讯音乐做的TM town，它会把2D的这个地图，结合上这个伪3D的这样的这个啊物件，还有人物啊，做成一个2.5D的虚拟世界啊，也是一个用户去共创这个编辑这个世界，去做一个虚拟空间的社交，结合上原有的全民K歌的包括啊，合唱啊，包括点歌啊，还有一些房间内的小游戏啊等等的玩法，那用户就可以和这个世界里的物件去进行互动，和其他人去做。

社交，那这个也是呃。虚拟形象聊天，还有整个虚拟空间的一个2.5D上的一个应用，比起3D它的主要的变化，比起刚才的2D和像素风，它主要的变化主要是这个呃画风上的改变，以及有一些更丰富结合这这个业务场景的特色玩法。那我们有看到像更多行业和应用场景内的3D虚拟世界，比如说这个叫花动科技是我们的啊，一个客户他做的是这个虚拟啊。办公的场景，把他们线下的这个办公室完全还原，并且搬到了线上，通过外部端即可加入。然后走也同样也是走进这个，比如说这个茶水间，就可以看到别人的摄像头，和别人进行这个呃沟通，那还有像这个教育类的场景在面向这个，呃，这个幼儿教育的场景，我们看到al这款产品呢，它会啊。

这个老师和学生提供虚拟空间的编辑器，然后老师可以去设定啊整个空间的构成，然后学生可以在里面进行玩耍互动，并且在这里面进行教学。像这里面看到的就是呃，虚拟互动的直播间啊，是结合腾讯云渲染去完成的这个。和和斗斗鱼完成的这个合作案例啊，可以看到用户是可以在这个虚拟空间里面走来走去，并且参与这这场啊直播的互动的，比起纯观看或者是弹幕的互动会有更强的参与性。那我们看到的还有一些玩法，比如说像数字孪生的场景复原，这里面南头古城的这样的一个场景翻到了线上，还有虚拟的活动。

这些都是呃，3D虚拟世界的最新的应用场景。那我们提出的解决方案呢？在互动娱乐上啊，主要有几个方面，比如说像数字资产，我们会提供正版曲库的解决方案，我们会提供虚拟形象的能力，我们会提供虚拟空间的这样的DEMO和搭建啊，包括虚拟道具的赠送这样一套，呃，数字资产也包括美术设计素材，这些是能够帮助客户快速上线的。制作工具上呢，刚才有提到用户需要自己的一个虚拟形象，Avatar能够在这个虚拟空间里代表自己的一个个性，能够彰显自己的一个，呃，在虚拟空间内的一个化身吧，那这里。要包括一些能力，比如说通过拍拍照去自动生成这样的形象，或者是DIY去捏脸啊，去定制自己的形象皮衣啊等等各种道具，那在驱动角度上呢，需要去通过面部的能力去啊，让这个表情啊，形象的表情能够随着现实中的人物的喜怒哀乐去做响应啊，包括手势的识别和啊用户不想开麦开摄像头的时候，通过语音去驱动这个形象的呃动作呃，以及我们的自研的渲染引擎啊，超轻量级能够对应用业务当中最轻量的侵入和影响，那在虚拟道具和虚拟空间上呢，也是。

在这个整个互动场景内，需要去搭建的很多内容，包括变声啊，动态特效啊，空间内的和这个虚拟形象的交互啊等等，那刚这些应用场景刚才有介绍不少了，有一些呃，各行各业的这个应用都有在做这个像虚拟空间的演化或者是演进啊。最底层呢，我们的这个所有的实时互动的底层技术能力。那这里的基础能力还有一些想展开的，比如说像TRTC提供的这个千人音视频互动能力，我们突破了单房间的主播上线，支持了千人同时开麦，开摄像头啊，以及在这么多上行的情况下，服务端可以去智能选择音量最大的做转发，然后降低下行的拉流的压力，并且防止很多人开麦，造成一个非常嘈杂的听感啊。第二个是空间音频的效果，刚才有提到过，在这个语聊啊，各个场景里面都有应用，那我们会模拟两种，一个是呃，角度上的啊，能够听到声音从不同方向来源的这样的一个效果。第二个是这个随着。

呃，虚拟空间内的距离可以做音量上的衰减啊，在距离变远的时候，声音也会越来越轻了，那这个也是另外一个角度的空间音频，这两个结合起来是我们的3D空间音频的效果啊，是自研的音效技术。那在刚才提到的这个虚拟形象和虚拟世界的这个结合上，其实也有一些啊工作我们去完成了，比如说这个形象在虚拟世界里的物理引擎的碰撞，看卡翻阅的各种动作，以及他在做不同动作之间的另这个。

过渡和切换的这个的过程也需要更自然啊，以及多动作，同时比如说边走边鼓掌啊等等这样的一些啊，结合能力都需要去打磨并且完成啊，以及这里的这个设计和道具的交互，比如说我这个形象走到了啊某一个点歌台前，就需要去和这个点歌台做相应的交互，大屏前就可以去放电影等等的这样的一些，呃，设定也都是封装完成了的，那这是我们在形象和世界之间呃做的一层这个。胶水层的连接吧，那最后是呃，结合我们的云渲染能力，比如说在呃这个对于渲染要要求比较高的情况下，性能机器的性能又不是足够能够支撑这样的应用，那我们也会推出云渲染的这样的技术支持，把这样的3D应用部一键部署到云端，然后并且结合我们丰富的这个生态伙伴，去搭建您所需要的这个虚拟空间，会议啊，活动啊啊会会展啊等等啊，那这样的话就可以支持全端的SDK，只需要去拉视频相关的流，然后所有的应用都可以全部放在云端部署。

呃，这部分的能力，我们接下来还有其他的老师会做详细的展开。呃，最后做个总结，我们在虚拟世界所有的新社交以及扩展的应用场景里面啊，包括了2D的平面空间，3D的渲染空间这样两个呃编辑的能力，以及虚拟形象，从最简单的前面看到的语聊的2D icon进化到啊连您的呃这样的应用到2.5D的的形象，以及3D的纯虚拟人的这样的能力啊，都是有提供对应的SDK的，可以满足丰富的业务场景以及最底层的实时互动的各项应用能力，TRTC啊播呃I'm能力啊，以及渲染的这个技术支持。

OK，我今天的分享就是这些内容，感谢大家的时间。