FFmpeg 是一个非常强大的多媒体处理工具 , 可以用来 处理 / 转换 / 播放 各种音视频格式的数据 , 因此 使用 FFmpeg 自然也可以提取 YUV 像素格式的数据 ;
YUV 4:4:4 采样格式 , Y 亮度分量 与 UV 色度分量 的比例是 1:1 ;
在流媒体应用中，视频编码是必不可少的一环。视频编码的作用是将高带宽、高码率的原始视频流压缩成低带宽、低码率的码流，以便于传输和存储。H264是一种高效的视频编码标准，具有良好的压缩性能和广泛的应用范围，在实时流媒体应用中得到了广泛的应用。
今天主要还是分享ffmpeg命令的一些操作：提前像素格式和PCM数据、如何利用ffmpeg进行命令转封装。
2023-03-10：YUV420P像素数据编码为JPEG图片，请用go语言实现。
在视频编码中，延迟是一个常见的问题。对于实时性要求较高的应用（如视频直播、视频会议等），延迟问题尤为重要。本文将重点讲解FFmpeg中H264和H265编码器的延迟问题，以及如何优化和降低编码延迟。
YUV模型是根据一个亮度(Y分量)和两个色度(UV分量)来定义颜色空间，常见的YUV格式有YUY2、YUYV、YVYU、UYVY、AYUV、Y41P、Y411、Y211、IF09、IYUV、YV12、YVU9、YUV411、YUV420等，其中比较常见的YUV420分为两种：YUV420P和YUV420SP。
FFmpeg解码涉及的知识点比较多，很容易被函数和结构体搞定不知所错，我们先从整体上对解码流程有个认知，画了张图把解码流程图，如下
本文为作者原创，转载请注明出处：https://www.cnblogs.com/leisure_chn/p/14349382.html
FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。FFmpeg本身是跨平台的，支持多个平台。
YUV（也称YCbCr）是电视系统所采用的一种颜色编码方法。其中 Y 表示明亮度，也就是灰阶值，它是基础信号；U 和 V 表示的则是色度，UV 的作用是描述影像色彩及饱和度，它们用于指定像素的颜色。U和V不是基础信号，它俩都是被正交调制的.
1.封装格式 MPEG-4 其中 MPEG-1 和 MPEG-2 是采用相同原理为基础的预测编码、变换编码、 熵编码及运动补偿等第一代数据压缩编码技术； MPEG-4（ISO/IEC 14496）则是基于第二代压缩编码技术制定的国际标准，它以视听媒体对象为基本单元，采用基于内容的压缩编码，实现数字视音频、图形合成应用及交互式多媒体的集成。 MPEG 系列标准对 VCD、 DVD 等视听消费电子及数字电视和高清晰度电视（DTV&&HDTV）、 多媒体通信等信息产业的发展产生了巨大而深远的影响. AVI AVI，音频视频交错(Audio Video Interleaved)的英文缩写。 AVI 格式调用方便、图像质量好，压缩标准可任意选择，是应用最广泛、也是应用时间最长的格式之一。 FLV FLV 是 FLASH VIDEO 的简称， FLV 流媒体格式是一种新的视频格式。由于它形成的文件极小、加载速度极快，使得网络观看视频文件成为可能，它的出现有效地解决了视频文件导入 Flash 后，使导出的 SWF 文件体积庞大，不能在网络上很好的使用等缺点。
YUV,分为三个分量，“Y”表示明亮度，也就是灰度值；“U”和”V”表示的则是色度，作用是描述影像色彩饱和度，用于指定像素的颜色。YUV主流的采样方式有三种：YUV4：4：4，YUV4：2：2，YUV4：2：0，这里主要介绍下YUV420。
下面来看一个视频解码的简单例子，这个程序完成了对”北京移动开发者大会茶歇视频2.flv”（其实就是优酷上的一个普通视频）的解码工作，并将解码后的数据保存为原始数据文件（例如YUV420，YUV422，RGB24等等）。其中略去了很多的代码。
YUV，是一种颜色编码方法。常使用在各个视频处理组件中。 YUV在对照片或视频编码时，考虑到人类的感知能力，允许降低色度的带宽。
本文为作者原创，转载请注明出处：https://www.cnblogs.com/leisure_chn/p/14355015.html
现在我们虽然得到了转换后的MP4文件，但是我想进一步验证得到的文件到底是不是无损的。在查询官方文档的时候我看了官方给出了两种验证方式：
有没有遇到过下载的视频原始数据文件是y4m格式的情况，没有办法播放和查看，是不是很苦恼，本文教你处理方法。
原标题：Six FFmpeg Commands You Can’t Live Without
* 播放本地 MP4 视频文件 `test.mp4` 的命令，从第 2 秒位置开始播放，播放时长为 10 秒，并且在窗口标题中显示 "test time"：
这里主要是为了区分两个不同的解码器而使用了 -vcodec 参数，并将其值设为 mpeg4 或 h264。
本篇文章主要描述如何使用OpenGL ES来渲染i420(YUV420P)和nv21(YUV420SP)
得分以下步骤：首先 avi 转 mp4,mp4再转flv 同时flv对声音频率有要求，只能事11025 22050 44100. 要转成 12000得flv，需要从flv再转一次。
播放一个视频文件的流程 封装格式 视频流和音频流按照一定的格式存储在一个文件中。常见的封装格式有mp4、flv、avi、mkv… 视频编码 将视频像素数据（RGB， YUV等）压缩编码成视频流，从而降
-i 是图像路径，img%5d.jpg表示图像的名称类似为img00001.jpg
在前面的文章中已经完成了图片的加载和显示，接下来要做的就是加载 YUV 文件并显示。
作为在音视频行业持续发力多年的视频服务厂商，TSINGSEE青犀视频研发了开源平台EasyDarwin，还有多款音视频流媒体平台，我们开发流媒体平台基本都要使用ffmpeg，在ffmpeg中，H264在编码前必须要转换成YUV420P，本文就分享一下怎么将h264转成YUV420P。
=====================================================
FFmpeg文档汇总：https://ffmpeg.org/documentation.html
转：https://blog.csdn.net/armwind/article/details/52190123，文章不错特转载过来备忘
今天Android要把Bitmap里的数据转成I420，用的YUV库，但是总有色差。查了好久，最终发现
通常，推流服务器会提供一个收流的 RTMP 服务器地址，还会提供一个直播流的流名称，也叫串流密钥。如推流的 RTMP 服务器地址是 rtmp://publish.x.com/live，串流密钥是 stream，那么最后组成的推流地址就是 rtmp://publish.x.com/live/stream。
使用的FFMPEG库版本下载地址：https://download.csdn.net/download/xiaolong1126626497/12304729
在测试MPSoC VCU的编解码时，经常需要使用NV12 YUV文件。YUV文件很大，所以经常依靠解压MP4等文件来产生NV12 YUV文件。 FFMpeg是一个强大的工具，可以用来从MP4文件生成NV12 YUV文件。
raw数据是sensor输出的原始数据，一般有raw8, raw10, raw12等，分别表示一个像素点有8bit、10bit、12bit数据。是sensor将光信号转化为电信号时的电平高低的原始记录，单纯地没有进行任何处理的图像数据，即摄像元件直接得到的电信号进行数字化处理而得到的。
overlay 过滤器 可以 将多个 视频流 / 设备 / 视频文件 合并到一个 视频界面 中 ,
本文主要介绍了如何在移动端GPU上对视频进行高效的编码与解码，通过对比多种编码方式、使用GPU对视频进行硬件加速、利用GPU对视频进行实时处理、以及对视频进行高效压缩与解码，最终实现了在移动端GPU上对视频进行高效编码与解码的解决方案。
详情参考 ：https://baike.baidu.com/item/%E8%A7%86%E9%A2%91%E7%BC%96%E7%A0%81/839038 首先我们要分清文件格式和编码格式：
一、前言 ffmpeg在视音频编解码领域算是一个比较成熟的解决方案了。公司的一款视频编辑软件正是基于ffmpeg做了二次封装，并在此基础上进行音视频的编解码处理。然而，在观察编码后的视频质量时，发现图像帧出现了较为明显噪声，类似于水面波纹一般散发开来，在运动场景下尤为明显。初步怀疑应该是码率太低导致的画面失真。于是增大码率重新编码一次，噪声仍然很明显。基本上可以排除是码率太低的问题。 仔细观察原片，也可发现有类似的图像噪声出现，但是微乎其微到几乎不可察觉。于是再次怀疑是ffmpe
YUV是为了解决彩色电视与黑白电视的兼容性。黑白视频只有Y值，也就是灰度。而彩色电视则有YUV3个分量，如果只读取Y值，就只能显示黑白画面了。YUV最大的优点在于只需占用极少的带宽。
接触前端音视频之后，需要掌握大量音视频和多媒体相关的基础知识。在使用 FFmpeg + WASM 进行视频帧提取时，涉及到视频帧和颜色编码等相关概念。本文将对视频帧中的颜色空间进行介绍。 一、视频帧 对于视频，我们都知道是由一系列的画面在一个较短的时间内（通常是 1/24 或 1/30 秒）不停地下一个画面替换上一个画面形成连贯的画面变化。这些画面称之为视频帧。 对于视频帧，在现代视频技术里面，通常都是用 RGB 颜色空间或者 YUV 颜色空间的像素矩阵来表示。在 ffmpeg 里面，我们可以看到源码 li
下图引用自“雷霄骅，视音频编解码技术零基础学习方法”，因原图太小，看不太清楚，故重新制作了一张图片。
以原始视频为参考，将转码后的视频与原始视频进行对比是评价视频质量的一类方法，这类方法属于视频质量评测中的全参考方法，精确性较高。一段视频由大量的视频帧组成，如果原始视频和转码后视频的每一帧都是同步的，可以从两个视频中各取对应的一帧，对这两帧进行比较，使用一些算法去统计、评估两个视频的差异，进而得到一些客观上的指标。目前常见的全参考评测指标有峰值信噪比（Peak signal-to-noise ratio，PSNR）、结构相似性（Structural Similarity，SSIM）、视频多方法评估融合（Video Multimethod Assessment Fusion，VMAF） 等，一些开源的媒体处理库（如 FFmpeg）提供了这些指标的计算方式。
FFmpeg、JavaCPP、JavaCV的关系 先简单的梳理一下FFmpeg、JavaCPP、JavaCV的关系： FFmpeg、OpenCV可以理解成C语言版的本地库（Native library），Java应用无法直接使用 JavaCPP将FFmpeg、OpenCV这些常用库做了包装（wrapper），使得Java应用也能使用这些Native API（JavaCPP的底层实现是JNI） 这些JavaCPP包装后的API，被JavaCV封装成了工具类（utility classes），这些工具类比原生A
然后分别开启音频和视频的解码线程开始解码。我们可以看到涉及的主要结构体有AVCodecContext 、AVCodecParameters 、AVCodec 、AVFrame
数字图像处理的过程中，YUV文件是比较常见的视频源数据。YUV不像RGB那样要求三个独立的视频信号同时传输，所以用YUV方式传送占用极少的频宽。
在实际工作中，通常需要ffmpeg作为工具来验证一个问题，比如播放一个视频，提取一个码流，转码视频，转封格式等，用的时候才发现忘记了相关命令，Google一番花老大的力气才找到自己需要的命令行。本文总结常用的命令，并演示如何通过命令行的help用法去构建新的命令。
最近问v4l2的人挺多的，等忙完这段时间，后面有空研究一下。今天给大家分享一些应用demo;
**像素是图像的基本单元，一个个像素就组成了图像。你可以认为像素就是图像中的一个点。**在下面这张图中，你可以看到一个个方块，这些方块就是像素。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
