前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Zoom支持自动生成字幕;SharePlay上线;Safari 更新导致大量bug |WebRTC风向

Zoom支持自动生成字幕;SharePlay上线;Safari 更新导致大量bug |WebRTC风向

原创
作者头像
刘连响
修改2021-11-17 16:15:12
1.4K0
修改2021-11-17 16:15:12
举报
文章被收录于专栏:腾讯云TVP

内容简介: 自动生成字幕难度不低,但国民级应用Zoom把这一功能拿来了;在iOS 15.0 Safari的更新中,增加了很多WebRTC相关的特性,你想了解吗?相关信息,尽在文中。

Zoom支持自动生成字幕

Zoom正面临着很激励的竞争,前一段时间开始做RTC的PaaS服务, 以147亿美元收购five9,但最后以失败而告终。Zoom也在不断迭代提升其产品的粘性,最近自动生成字幕能力现在可用于所有免费的Zoom会议账号,目前只支持英文,后续会支持其他的语言。

以后我们在和外国人开会就再也不怕蹩脚的英文了。

自动生成的字幕可以在 Zoom 视频会议或网络研讨会上自动提供发言人字幕。若要启用该功能,需要访问 Zoom 网络门户。与会者仍可以私下要求会议主持人在会议期间使用会议工具栏启用现场转录。并且Zoom 还支持手动字幕以及跟第三方字幕服务的整合。

所以,腾讯会议什么时候支持上这个功能呢?

相关链接: https://www.cnbeta.com/articles/tech/1194821.htm

SharePlay上线

10月26日,Apple 推送了iOS 15.1 正式版。本次更新修复了iOS 15.0 中无法通过Apple Watch解锁iPhone的 bug,同时还正式上线了 FaceTime 同播共享(SharePlay),并为 iPhone 13 Pro 系列机型带来了 Apple ProRes 视频拍摄功能。

同播共享(SharePlay)可以让用户在进行FaceTime通话时,和对方同步观看视频,听音乐,共享屏幕。

苹果利用自己生态的优势来提升自己产品的粘性,目前已经看到一些小游戏在尝试使用SharePlay,相信后面基于SharePlay 越来越多的创新玩法会涌现。

Android平台目前还没有类似的玩法和生态系统,不知后续是否会进行更新。但不妨碍第三方公司会推出类似玩法和跨平台的方案的体验,但SharePlay利用了苹果特有的权限,第三方的实现可能很难达到类似的跨平台的体验。

目前可以看到体验共享方向的产品越来越多,比如 K歌体验共享:线下K歌可以与朋友对唱,及时听到好友演唱, 在超低延迟的加持下 ,线上K歌可以连麦,获得无感知延迟的合唱体验。听歌体验共享:“一起听”是在线听歌中的新的休闲娱乐模式,让听歌和社交互动完美结合。当两个陌生人配对成功并“一起听”, 还可以进行实时的语音视频以及其他的互动玩法。观影体验共享:和一起观影的人讨论电影可以增加观影乐趣,新技术驱动下,在线上观影场景中,逐渐产生了更多的共享体验模式。

同时也不难想象,未来会有更多类似体验共享的应用通过同播共享给自己的APP加入一些新的有创意功能的团队,这一功能的未来也是无可限量。

相关链接1: https://36kr.com/p/1452080810256521

相关链接2: https://36kr.com/p/1457374160955264

Safari 更新导致大量bug

在iOS 15.0 Safari的更新中,增加了很多WebRTC相关的特性,比如Insertable stream的支持,可以用来端到端加密,屏幕共享、HTTP3.0的支持,甚至支持在浏览器中跟facetime互通。但同时也出现了很多bug,对WebRTC影响比较大的是,iOS15.1系统在使用WebRTC推流的时候会导致crash, iOS 15.0的safari中websocket如果在服务端开启了压缩,会导致连不上。

WebRTC 要实现SVC了

其实WebRTC很早就支持了vp9的SVC, 但一直只能通过命令行开启,并不能默认打开。后来SVC成为WebRTC 1.0 API的扩展规范, 现在可实现完备的SVC支持。SVC在视频会议场景中很受用,但也带来了不少问题,比如在移动端开启了SVC后,可能就要放弃硬件编码, 一个很美好的技术到真正落地的时候总会带着很多遗憾和取舍。

咨询了Intel 给Chrome做硬件编解码支持的专家后,了解到这次SVC的实现并不是那么的完美:

“其实是给av1用的 vp9还不理睬这个api 264只会支持L1T2和L1T3。然而av1的硬件编码我只在windows上加了支持,且只会以后支持L1T2和L1T3。除非你只用软件编码”

现在让我们静静等待SVC, 有总好过没有。

相关链接:

https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ

两年后 Skype Web版本现在也能在Firefox上使用了

2020年,由于COVID-19的流行,线上视频会议这一沟通方式开始意外走红,微软也跳上了这一行列,这并不奇怪。Skype 作为VOIP鼻祖级别的公司,被微软收购之后反而走向了下坡路,很多人可能已经忘记了Skype。微软的Teams推出之后, 由于跟Office 套件的捆绑策略迅速抢占了大量的企业办公协同市场, 就在人们以为微软会放弃Skype之后, Skype终于让他的web版本,支持了firefox。

前一段时间甚至传出微软会重新定位Skype, 主打年轻人。那对于Skype为什么要支持web端,就像是苹果终于让FaceTime支持web端大概思路是一样, 虽然Web中WebRTC的体验没法跟native的体验相比,但Web所具有的一大优势就是不用下载,人人往往低估了这一优势, 个人的看法是当web端的功能或者体验能达到native 的70%的时候,人们会积极的拥抱Web的版本。

相关链接:https://www.cnbeta.com/articles/tech/1194519.htm

Edge浏览器将支持GeForce Now服务

自从微软将Edge从其自制的EdgeHTML引擎切换到Chromium之后,对WebRTC的支持越来越好, 最近Edge浏览器将支持GeForce Now服务, XBox玩家可以把他们的PC游戏通过Edge浏览器串流到主机游戏上玩, 看起来这是一个基于WebRTC的局域网云游戏,好奇他们在局域网下基于WebRTC的云游戏可以做到端到端多少毫秒的延迟。

值得一提的是,今年9月的Edge浏览器更新,还添加了对另外一个云服务——谷歌Stadia的支持,允许玩家在Xbox主机上使用Edge浏览器在谷歌Stadia上玩游戏。

持续关注云游戏的发展。

相关链接:https://hot.cnbeta.com/articles/game/1194311.htm

References

[1] https://www.cnbeta.com/articles/tech/1194519.htm: https://www.cnbeta.com/articles/tech/1194519.htm [2] https://hot.cnbeta.com/articles/game/1194311.htm: https://hot.cnbeta.com/articles/game/1194311.htm [3] https://36kr.com/p/1452080810256521: https://36kr.com/p/1452080810256521 [4] https://36kr.com/p/1457374160955264: https://36kr.com/p/1457374160955264 [5] https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ: https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ [6] https://www.cnbeta.com/articles/tech/1194821.htm: https://www.cnbeta.com/articles/tech/1194821.htm

>>>点击进入订阅《云荐大咖》全系列精彩作品

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • Zoom支持自动生成字幕
  • SharePlay上线
  • Safari 更新导致大量bug
  • WebRTC 要实现SVC了
  • 两年后 Skype Web版本现在也能在Firefox上使用了
  • Edge浏览器将支持GeForce Now服务
相关产品与服务
云游戏
云游戏(Game Streaming,GS),依托腾讯多年积累的音视频能力,配合腾讯云丰富的边缘计算节点和灵活的 GPU 虚拟化技术,结合轻量稳定的全端 SDK,以及自定义虚拟按键、自动更新、游戏预启动、游戏加速等个性化功能,为云游戏开发者提供全面的一站式端游+手游 PaaS 方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档