前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >欧洲杯直播卷向AI、XR等新赛道,腾讯云音视频助力平台把握观赛体验升级新风向

欧洲杯直播卷向AI、XR等新赛道,腾讯云音视频助力平台把握观赛体验升级新风向

作者头像
腾讯云音视频
发布2024-07-01 11:07:10
1820
发布2024-07-01 11:07:10
举报
文章被收录于专栏:音视频咖音视频咖
6月15日,2024欧洲杯在德国揭开战幕,24支球队、31天的精彩对决,为全世界球迷带来了一场盛大的足球盛宴。除了球场上的风云变幻,各大赛事转播平台也都摩拳擦掌,秀起了自己的新技术。虽然本次欧洲杯仅提供1080P HDR的转播服务,但平台纷纷通过发力AI、沉浸式、低延迟、XR等新赛道,将观赛体验再度升级,以期打造出更吸引新生代用户群体的观赛体验!

国内,各大平台在为用户带来欧洲杯全程直播的同时,推出了元宇宙观赛、裸眼3D观赛、VR互动观赛、AI互动观赛等诸多新场景、新玩法。跟随苹果VisionPro上市掀起的XR热潮,不少平台还依托空间音视频能力,打造了新颖的沉浸式空间观赛。空间视频、AI等新技术爆发的今天,赛事直播用户观赛体验的升级也已经开始卷向新赛道,从单纯的比拼分辨率,转向了互动、玩法、内容等更丰富多元的新方向。

XR观赛效果示例(图片来源自网络)

作为全球领先的音视频服务商,腾讯云音视频多年来已在各类大型赛事直播上积累了丰富经验,并率先布局,在AI、空间音视频、沉浸式、低延迟等创新方向储备了丰富能力。腾讯云赛事直播解决方案可以为观众提供毫秒级的极致直播观看体验,让用户在手机、电脑等多端享受到媲美传统有线方案的超低延时赛事直播。同时,腾讯云赛事直播方案还结合先进的AI能力,提供智能时移、实时高光打点、精彩集锦剪辑等功能。用户可以在直播中随时拖动回放之前的精彩内容,没能第一时间观看直播也可通过进度条上的标注,快速回顾高光时刻,并且可在赛中、赛后第一时间看到比赛的精彩集锦。另外,腾讯云音视频还升级了3D视频编解码能力,完成了对MV-HEVC拓展的支持,让用户享受到低成本的沉浸式空间视频新体验。

高效的媒体传输、极致的编码内核、智能的视频AI、丰富的创新玩法以及海量的技术积累,腾讯云音视频端到端一体化赛事直播解决方案为平台提供全球超低延时直播能力加持,打造极致且多元的观看体验,助力平台轻松把握观赛体验升级新风向。

助力平台场景创新

腾讯云赛事直播解决方案

3D视频编码架构全面升级

率先支持3D空间视频且压缩率提升20%

Vision Pro的发布让空间计算这个概念快速从幕后走向了前台。3D视频通过模拟人眼的立体视觉,使我们能够感受到深度和距离,提供了一种更加真实而富有沉浸感的视觉体验,突破传统显示屏限制的3D交互体验也让众多平台看到了沉浸式空间视频的巨大潜力。早在Vision Pro发布之前,腾讯云音视频便已开始关注3D视频编码标准的进展与实现,并第一时间添加了对MV-HEVC拓展的支持。MV-HEVC编码标准可显著提升3D视频主客观体验。通过与V265内置参考帧搜索快速算法相结合,以及引入cutree算法、并行优化等众多针对编码压缩率和多线程编码的深度优化,我们自研的MV编码拓展器获得了相比传统解决方案明显的压缩率提升,同等画质下能可减少20%的带宽开销,为3D视频的存储和传输大幅节省成本

除去编码技术,容器格式和分发协议也需要更好地升级以满足空间视频的分发支持。为了满足潜在客户对3D空间视频的需求,腾讯云媒体处理MPS还迅速打通了从MV-HEVC编码、ISOBMFF(ISO Base Media File Format)容器封装到HLS分发播放的完整链路。在空间视频场景下,腾讯云MPS基于ISOBMFF标准,对MV-HEVC标准进行了扩展,对于不支持MV-HEVC解码能力的播放器,可以只解析和解码Base Layer数据,相当于播放主视角显示2D画面;而支持了MV-HEVC的播放器可以同时解析和解码Base Layer和Secondary Stereo Layer数据,以3D的方式显示。同时,为了支持分发空间视频,腾讯云MPS在现有HLS标准的基础上也引入了支持空间视频的特性。经过这一系列的升级及优化,平台接入腾讯云媒体处理MPS便可轻松实现3D空间视频的编码、传输及直播播放,让观众享受到沉浸式空间视频的全新体验。

XR创新玩法

带来沉浸多元的观赛体验

除了编码传输外,当前,观众享受沉浸式的空间观赛体验还经常会受限于没有合适的终端设备。腾讯云XR实时云渲染解决方案能够很好地解决这一问题。方案提供了应用管理、并发资源管理与调度、音视频串流等全套能力,能够将高算力需求的AR/VR内容渲染工作置于云端服务器上运行,并将渲染完毕的画面及声音编码后以音视频流的方式,通过网络实时传输给用户。XR实时云渲染解决方案提供轻量的JavaScript、Android和iOS SDK,支持AR/VR眼镜、手机/Pad、PC、VR头盔等多终端,最快一天即可完成方案接入并使用。极致的GPU虚拟化和编码能力,配合全球3200+边缘加速节点,让腾讯云XR实时云渲染方案可以为全球用户提供稳定、流畅的XR体验。

高效的媒体传输

跨洲际延迟400ms以内

稳定且低延迟的媒体传输是良好观赛的体验的基础。腾讯云媒体传输(StreamLink)提供了跨地区的低延迟稳定传输音视频数据的能力,用户可以使用StreamLink实现两地之间的低延迟流媒体传输,解决现场到制作中心的低延迟稳定传输问题。对于跨洲际的音视频数据传输,可以将延迟稳定控制在400ms以内的水平。

针对现场采集端网络存在的问题,诸如网络波动、带宽不足等情况,腾讯视频云直播提供了TMIO SDK优化终端到云端的推流传输质量。

除了具有高抗丢包能力、低延迟传输,以及低成本的接入方式外,StreamLink还提供了多路径传输的能力。通过多个链路层同时传输,提高整体端到端的传输可靠性和质量,进一步提升上行推流和最终的播放端体验。发送端针对每条建立好的连接,根据实时的传输QoS进行状态的判断和决策,选择最佳路由进行数据的发送。进而解决弱网下单一网络带宽不足或抖动的问题。

同时,媒体传输(StreamLink)提供多接入点的多路径方案。在某些边远地区,当上行接入点无法进行本地有效覆盖时,通常的做法是推流前进行探速,评估出质量最好的接入点。但电竞赛事活动的持续时间往往较久,而实际直播中,网络状况又不断变化。因此,传统方法未必能很好地动态识别网络状况并及时调整路由。腾讯云媒体传输提供了上行多接入点的方案,在直播推流过程中可以根据多链路的QoS,动态的调整路由策略和数据发送比例,并做到下行播放无感知;还可做到包级别调整发送路径,如高优先级包、重传包等采用质量更好的路由,确保整体传输质量的最优化。

极致编码内核

节省50%带宽/存储成本

实现高清低码是平台降本增效的关键。在音视频编码阶段,基于自研的O264/V265/TXAV1/O266等多款不同标准的编码内核,腾讯云媒体处理在压缩性能、编码速度、码率控制、主观视觉等多个算法中均获突破,相比业界广泛采用的x264/x265/libaom,自研的编码器带来30%+的压缩增益;叠加极速高清智能感知动态编码技术,可以通过将智能场景识别、动态编码匹配和画质增强修复功能相结合,在节省50%带宽的基础上,提升主观画质,实现以更低码率提供更高清的流媒体服务

在媒体封装阶段, 针对赛事场景,方案可以支持多码率、多音轨、广告、continue等能力。

通过基于HLS/DASH/CMAF自适应码率输出能力,方案可以满足不同播放端网络状况;借助Fairplay、Widevine、PlayReady等多种DRM加密方案,提升直播安全性;基于多音轨的能力,可以使不同语言区观众,在观看同一个频道时自由选择;同时,在源流短暂断流期间,可以自动补齐一个静态图片或者上传好的一段广告,优化观众的观看体验。

超低延时直播

毫秒级超低延时播放体验

腾讯云直播提供的CMAF、LLHLS低延迟切片式封装协议,在满足自适应多码率的同时,还可以达到与flv持平的较低延迟。通过分块编码和chunk传输,把延迟从HLS、DASH的分片粒度降低到chunk级别。同时,基于HTTP的低延迟CMAF和LLHLS,可以直接在几乎所有的CDN平台分发,标准化和通用性较好。

低延迟CMAF/LLHLS另外,基于WebRTC的快直播,则提供了1s以内的超低延迟播放体验。超低延时快直播基于WebRTC对端到端信令流程、音视频编码格式支持、传输改造、媒体处理优化源等方面进行全面优化升级,更加符合大规模直播场景的应用。

云端在线导播

便捷灵活且低成本

在线导播依托腾讯云强大的视频直播能力,在云端实现直播流的切换,多画面的混流播出等。云导播台支持自定义画面布局、备播机制、音视频同步切换等功能,支持20+路直播、点播、图片输入源,4路自定义布局混流,省去了沉重的传统导播台的硬件设备,让您方便快捷的使用导播服务,丰富线上业务场景。

动态广告插入

千人千面的个性化投放

广告投放是赛事直播平台的主要变现手段之一,腾讯云赛事直播可以提供基于服务端的广告插入(SSAI),同时还能通过频道线性组装(Channel Linear Assembly)和SSAI结合实现现在流行的流媒体广告形式FAST(Free Ad-Supported TV) Channel。不同于基于客户端的广告插入(CSAI),在SSAI中的所有操作都在服务端进行,直接将广告媒体文件拼接到视频流中,优势在于不易被屏蔽或篡改。腾讯云广告插入功能通过SCTE-35标签在视频流中标识广告的插入点和结束点,从而实现动态广告插入。此外,每次广告都是由ADS广告服务器动态返回,可以为不同的用户呈现不同的广告,从而实现广告效果及收益的最大化。

丰富的AI能力

不错过任何精彩时刻

为了更好的让用户尽情享受比赛的精彩时刻,不错过任何精彩瞬间,腾讯云赛事直播借助AI等能力,还为客户提供了直播时移及精彩点位分析、智能弹幕等能力,支持直播过程中进行回看,实时智能分析精彩片段,在用户高频弹幕互动的情况下保障比赛画面关键区域不受遮挡。

  • 智能时移:

将 TS(Transport Stream)分片地址和 TS 文件单独存放,保存于云点播系统中。客户端通过时移播放域名传入时间参数,可以播放当前时间之前的精彩视频内容,用户可在观看过程中随时拖动播放进度条,回顾之前的直播内容。

  • 实时打点(高光时刻):

针对各类赛事直播,腾讯云直播结合AI可以低延时实时识别赛事直播中的精彩时刻,用户可根据播放进度条上的标注(足球赛事中的进球、电竞比赛中的击杀、团战等),快速时移回看精彩瞬间。用户侧也可以根据实时事件回调结合业务逻辑进行其他广告展示。

  • 智能精彩集锦:

根据直播流实时自动剪辑出精彩回放,可以在比赛中场休息期间结合导播台能力进行画中画回放。

  • 智能弹幕:

弹幕自动避开比赛画面 ROI 区域,让观众在互动同时,不错过任何一个比赛细节,体会到更细致的产品体验。

  • 智能字幕:

为了更好地服务于全球观众,腾讯云赛事直播可以对直播过程中的语音信息进行实时语音识别,并将其转换成字幕。此外,还支持将字幕翻译为目标语言,目前该功能开放了中、英、日、韩等语种的语音翻译服务。

如果您想要进一步了解或使用腾讯云相关能力,欢迎扫描下方二维码添加音视频小姐姐微信,我们将安排产研同学专门跟进您的需求。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2024-06-28,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 腾讯云音视频 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
云直播
云直播(Cloud Streaming Services,CSS)为您提供极速、稳定、专业的云端直播处理服务,根据业务的不同直播场景需求,云直播提供了标准直播、快直播、云导播台三种服务,分别针对大规模实时观看、超低延时直播、便捷云端导播的场景,配合腾讯云视立方·直播 SDK,为您提供一站式的音视频直播解决方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档