对直播平台制作来说,想要降低传输成本,视频的预处理是少不了的,比如去除无用帧、去除模糊帧、降采样、视觉显著性等等,这些内容的去除对直播画面来说没有太大影响,但存在又会影响到传输的速度。
直播平台制作的视频处理需要通过视频结构化分析过程,将视频分解成视频帧后,通常使用视频帧的特征来表达视频,能否正确提取视频特征描述视频信息将直接影响到最终视频的摘要效果。
一、视频处理的特征
1、颜色,其实和美颜差不多,直播平台制作需要对人类视觉上的颜色进行处理,包括但不限于场景颜色、肤色、背景色等,与其他特征相比,颜色是最好判断的,比较稳定,并且对形变不敏感,但是不同的帧图像可能有相似的颜色特征,所以需要结合这些特征一起使用
2、形状,表达视频内容的关键特征之一,视频帧中的对象和形状相关联,具有特定的语义意义,不过直播平台制作不是很常用这个,毕竟大部分情况都是直接摄取电脑画面,不存在变形一说
3、运动,光流表示二维图像中运动物体其像素运动的瞬间变化率,光流法是一种计算相邻帧之间物体运动信息的方法
二、深度特征
根据上面视频处理特征的判断,最终视频出来还是很模糊,毕竟只是一些直观、简单的处理,不过现在直播平台制作已经可以借助新的网络环境轻易提取出图片的深度高纬度特征,这些特征相对于低维度来说更具有代表性。
自编码器,是一种人工神经网络模型,主要作用是以无监督的方式输入数据的深层特征,工作原理是,将输入的数据通过编码器压缩成一个低纬数据,然后将数据解码成和直播平台制作原始数据相近的输出数据。
关键帧提取,直播平台制作利用各种算法去除原始视频数据的冗余性,选取视频中具有代表性的、有意义的部分组合并生成最终的可视化摘要。
声明:以上内容为云豹科技作者本人原创,未经作者本人同意,禁止转载,否则将追究相关法律责任
领取专属 10元无门槛券
私享最新 技术干货