在使用FFmpeg进行音视频编解码时，我们经常会遇到各种错误和异常情况。其中，一个常见的错误是avcodec_receive_packet返回AVERROR(EAGAIN)。本篇博客将围绕这个错误展开讨论，并提供解决方案。
本文为作者原创，转载请注明出处：https://www.cnblogs.com/leisure_chn/p/10584925.html
大家好，我是小涂，今天继续给大家分享播放器里面的相关知识，本篇文章主要是分享ffplay里面的视频解码线程相关源码，废话就不多说，开始开肝！
① FFMPEG 初始化 : 参考博客 【Android FFMPEG 开发】FFMPEG 初始化 ( 网络初始化 | 打开音视频 | 查找音视频流 )
本文是音视频系列文章的最后一篇了，也是拖了最久的一篇（懒癌发作-_-!!），终于下定决心，把坑填完。
如果使用FFmpeg提供的-list_devices 命令可以查询到当前支持的设备，其中分为两类:
FFmpeg是一个开源的多媒体框架，底层可对接实现多种编解码器，下面参考文件doc/examples/encode_video.c分析编码一帧的流程
本文将介绍 FFmpeg 如何播放 RTSP/Webcam/File 流。流程如下：
音视频同步的目的是为了使播放的声音和显示的画面保持一致。视频按帧播放，图像显示设备每次显示一帧画面，视频播放速度由帧率确定，帧率指示每秒显示多少帧；音频按采样点播放，声音播放设备每次播放一个采样点，声音播放速度由采样率确定，采样率指示每秒播放多少个采样点。如果仅仅是视频按帧率播放，音频按采样率播放，二者没有同步机制，即使最初音视频是基本同步的，随着时间的流逝，音视频会逐渐失去同步，并且不同步的现象会越来越严重。这是因为：一、播放时间难以精确控制，二、异常及误差会随时间累积。所以，必须要采用一定的同步策略，不断对音视频的时间差作校正，使图像显示与声音播放总体保持一致。
很久没有研究 ffmpeg了，版本变化很大，用一天时间先把 ffplay 翻出来看看。
在视频处理和传输应用中，将视频数据编码为高效的格式是非常重要的。H.265（也称为HEVC）是一种先进的视频编码标准，具有更好的压缩性能和图像质量，相比于传统的编码标准（如H.264），可以显著减少视频的带宽和存储需求。
折腾了几天的AAC编码和解码，最开始用的是ffmpeg的接口，实现好实现，但是调试总是有各种问题，最后还是使用faac-1.28/faad2-2.7实现了AAC的编码和解码功能，使用这两个库的原因，是因为手里有另一套代码工程，已经实现了AAC的编码和解码，所以就直接拿来用了。代码参考：https://gitee.com/anyRTC/anyRTC-RTMP-OpenSource/blob/master/ArLiveLite/codec/aacencode.cc
在固定的时间点可能无法获取从当前时间点的Packet获取对应的Frame，所以需要对获取的Packet进行判断，如果没有获取到对应的Frame应该继续获取下一Packet直到获取到对应的Frame为止。
https://github.com/gongluck/FFmpeg4.0-study/tree/master/Cff
node-media-server 是一个基于 Node.js 的流媒体服务器，它提供了构建和管理实时音视频流媒体应用程序所需的功能。它是一个开源项目，具有灵活性和可扩展性，适用于各种流媒体应用场景。
学习了雷神的文章，慕斯人分享精神，感其英年而逝，不胜唏嘘。他有分享一个转码程序《最简单的基于FFMPEG的转码程序》其中使用了filter（参考了ffmpeg.c中的流程），他曾说想再编写一个不需要filter的版本，可惜未有机会。恰好工作中有相关ffmpeg处理内容，故狗尾续貂，撰写本文。
sudo add-apt-repository ppa:kirillshkrogalev/ffmpeg-next
最近遇到一个问题，需要让ffmpeg支持android的URI路径媒体文件。最后用自定义IO解决了，而且对外部没有任何影响。本篇总结下解决过程。
https://github.com/gongluck/FFmpeg4.0-study/blob/master/official%20example/my_example.cpp
0.前言 参考博客：ffmpeg实现dxva2硬件加速 下载源码：GitHub：https://github.com/Yacov-lu/ffmpeg-DXVA-decode
这些年来，“短视频”吸引了无数网民的注意。相对于丰富有趣的内容，我们码农可能更关心其底层技术实现。本系列文章将结合ffmpeg，讲解几则视频处理案例。（转载请指明出于breaksoftware的csdn博客）
ffmpeg 过滤器，当然也有人称为 ffmpeg 滤镜。（用滤镜听起来好像是给 video 用的，所以不太好，因为 audio 也可以用），ffmpeg 目录下，有个文件夹叫 libavfilter，它可以单独编译为一个库。干嘛用的呢？用于音视频过滤。 比如，我有一个 mp4，想把它缩小一半，输出一个新的 mp4，那么，做缩小动作的，就是 libavfilter。
项目位置 https://github.com/deepsadness/SDLCmakeDemo
编码使用avcodec_send_frame()和avcodec_receive_packet()两个函数。
在前文《视频编解码硬件方案漫谈》中我们介绍硬件视频编解码的一般方案，本文我们进一步介绍音视频编解码如何在ffmpeg使用显卡硬件进行加速。
分类： 多媒体编程 2015-01-20 09:31 1037人阅读 评论(0) 收藏 举报
AVFormatContext 是一个贯穿始终的数据结构，很多函数都用到它作为参数，是输入输出相关信息的一个容器，本文讲解 AVFormatContext 的编解码层，主要包括三大数据结构：AVStream，AVCodecContex，AVCodec。
许久不使用ffmpeg了，最近一年一直是使用gstreamer在做媒体处理（因为产品采用开源框架缘故），考虑gstreamter过于庞大，过于晦涩（依赖glib,各种插件，面向对象的C框架等），自研框架还是优先开用ffmpeg来处理。将3年前的ffmpeg解码器例子用最新ffmpeg（4.2.3）来编译，问题一大堆。
在ffmpeg的源代码中，有新旧版本的编解码接口调用示例，但是demux、mux然后decode、encode的联动起来的接口调用实例并没有，在使用旧版本的编解码接口在编译时会报接口弃用告警信息，所以最好尽快把原有的调用方式切换到新的编解码接口调用方式，告警信息如下：
下图引用自“雷霄骅，视音频编解码技术零基础学习方法”，因原图太小，看不太清楚，故重新制作了一张图片。
解码器的初始化和编码器初始化类似，区别仅在于需要多创建一个AVCodecParserContext类型对象。AVCodecParserContext是码流解析器的句柄，其作用是从一串二进制数据流中解析出
实时监控视频的码率通常在5M以上码流，如果做手机端的实时预览，对带宽是很大的考验，所以很有必要先做降分辨率，然后降码率的处理。所有的处理在后台服务器进行，大致的业务流程如下：
2023-04-15：ffmpeg的filter_audio.c的功能是生成一个正弦波音频，然后通过简单的滤镜链，最后输出数据的MD5校验和。请用go语言改写。
音频采样格式可以分为packed和planar两类。以packed格式保存的采样数据，各声道间按照采样值交替存储；以planar格式保存的采样数据，各个采样值按照不同声道连续存储
想要解决上面提到的问题，我们需要对mp3文件的格式有个大致了解，为了方便讲解，我这里画了个示意图：
音视频处理在现代多媒体应用中起着重要的作用。C++是一种强大且广泛使用的编程语言，提供了许多用于处理音频和视频数据的库和工具。本文将介绍C++中常用的音频和视频编码解码技术，以及相关的库和工具。
注：av_read_frame()获取视频的一帧，不存在半帧说法。但可以获取音频的若干帧。
在音视频的解复用的过程中，有一个非常重要的结构体AVFormatContext,即输入文件的上下文句柄结构，代表当前打开的输入文件或流。我们可以将输入文件的路径以及AVFormatContext **format_ctx 传入函数avformat_open_input(),就可以打开对应的音视频文件或流。接下来再调用avformat_find_stream_info()函数去解析输入文件中的音视频流信息，打开对应的解码器，读取文件头的信息进行解码， 然后在解码过程中将一些参数的信息保存到AVStream结构对应的成员中。之后，我们便可以通过AVStream去初始化编解码器的上下文结构，下面给出代码：
本次代码实现的是给输入视频文件添加水平翻转滤镜，在视频滤镜初始化部分我们可以分为以下几步进行：
初始化音频滤镜的方法基本上和初始化视频滤镜的方法相同，不懂的可以看上篇博客，这里直接给出代码：
前文利用 FFmpeg 对 Android Camera2 采集的预览帧先进行渲染，然后利用 OpenGL 添加滤镜，最后将渲染结果进行编码生成 mp4 文件。
音视频开发中，视频编码是另一个重要的部分，基于 FFmpeg 软件解码前面系列文章已经介绍过了，接下来主要介绍软件编码这一块，包括视频编码、音频编码、为视频添加滤镜等。后期文章安排将介绍 Android MediaCodec 硬件编解码。
音视频开发中，视频编码是另一个重要的部分，基于 FFmpeg 软件解码前面系列文章已经介绍过了。
因为在2021年给自己定了目标和计划，学习ffmpeg，所以这篇文章是实现计划的第一步。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
