作者:scarlett,腾讯TEG 基础研究组
2019新型冠状病毒来势汹汹,全国有将近2亿人选择“云上班”、“云会议”,同时随着随着越来越多企业的数字化转型,远程办公及视频会议也成了一种趋势。居家办公/会议给人带来方便的同时,也给无独立办公空间的上班族带来烦恼,家庭成员频繁出现在视频会议中,让工作时专业、严肃的氛围变味,降低工作效率。AntiFakes-AI视频隐身技术可以定向“隐身”视频中的人或物,创造“独立办公空间”,让上班族不会因为视频会议有人闯入而分神或尴尬。
疫情之下,远程办公在此期间发展迅速,极可能成为未来办公的重要模式之一。同时,电子信息技术的不断进步和软件应用模式的不断创新,以及互联网与科技巨头的布局,都将支撑远程办公行业的技术水平不断提升,从而不断开发出功能和性能更加完善的新产品,带动了行业的持续发展。
从市场需求的角度,产业链在跨地区以及全球分工趋势的不断增强,使得跨地区工作协调需求日益提升;另一方面,随着市场经济深入发展,组织开始向管理要“利润”,开始更多的依靠高效的运营和优化的管理打造竞争内核,从“营销取胜”转向“管理取胜”,从而增加了对远程办公软件多样化功能的需求。综合来看,远程办公市场发展前景广阔。
不少办公族反馈在家办公最大的难点不是远程沟通,而是办公及视频会议时被打扰,熊孩子、关心送水果的父母打断了会议的正常进行,如何保障视频会议高效率高质量成为待解决难题。我们想到可以定向消除视频中新出现的人或物,以保证视频中“主角”仅办公族一人,达到有效提高办公效率的目的。
产品介绍
AntiFakes-AI视频隐身技术利用人体分割技术,精准去除视频画面人物,利用背景建模算法补全画面,达到定向“隐身”视频中人或物的目的。
产品实现过程
1.确认背景 通过背景建模算法对前景和背景进行区分,获取背景图片。对图像中每个背景采用一个混合高斯模型进行模拟,每个背景的混合高斯的个数可以自适应。同时整个过程模型不断更新学习,保证对动态背景具备一定的鲁棒性。 2.确认画面中人员 根据用户要求做人员检测,分离人员,锁定目标,分配id号,在后续视频帧中用追踪算法持续追踪; 3.定向隐身 定向的去除画面中人物,并利用图像处理算法补全背景
使用场景
视频会议:疫情情况下,超2亿人选择远程办公,视频会议是提高远程协作效率的重要工具。同时随着企业的数字化转型,远程办公/会议已经成了一种趋势。但在家办公时,无独立办公空间的上班族难免会因家人出现在视频中而分心或觉得尴尬。AntiFakes-AI视频隐身技术可以定向“隐身”视频中的人和物,让办公族成为视频中“唯一主角”,高效专注于视频会议和工作内容。
新闻录制:新闻录制时偶尔会遇到误入镜的观众,当这些观众“表演天赋”超标的时候,正经的新闻播报就会秒变年度车祸现场,AntiFakes-AI视频隐身技术可以对视频画面进行优化,保障新闻播报的专业性和信息传导效率
远程教育直播:在家网课直播的老师也会遇到家人入镜的尴尬情况,直播网课学生学习效率本身就低于面对面教学,在受到打扰的情况下,学生可能注意力更加分散,导致学习效果差,知识掌握度低的结果,使用AntiFakes-AI视频隐身技术可以减少课堂中环境干扰项,提高老师授课质量。
创新之处
AntiFakes-AI视频隐身技术在进一步迭代之后还可运用于影视、电影特效行业,如鬼片拍摄/制作相关技术,团体偶像演唱会特效,把多人演唱会“变”成个人演唱会等相关应用场景。
除了“隐身”技术,我们还会考虑“隐声”相关技术,“隐声”技术可以消掉音频中不属于“主角”的部分,让用户永远是视频里的唯一声源,相信在“隐身”和“隐声”的双重加持下,我们会有更多的应用场景及方向。
腾讯健康码 16 亿亮码后Elasticsearch调优实践