ffmpeg编码流程分析

2024-01-17 09:00 经验分享睿知

ffmpeg4，可执行文件包括ffmpeg用于转码、流媒体和转储媒体文件， ffplay用于播放媒体文件，ffprobe用于获取媒体文件信息，ffserver作为一个简单的流媒体服务器。成功编译并安装了ffmpeg与h264和aac 编码在ubuntu12.04LTS下的完整性...先至少下载yasm、ffmpeg、x264的源代码，具体步骤和这个差不多。
名称1、第三章FFmpeg的介绍与使用FFmpeg中的MPEG来自video 编码 standard mpeg，前缀FF是FastForward的首字母缩写。目录的默认编译将生成4个可执行文件和8个静态库。可执行文件包括ffmpeg用于转码、流媒体和转储媒体文件，ffplay用于播放媒体文件， ffprobe用于获取媒体文件信息，ffserver作为一个简单的流媒体服务器。
比如AAC 编码，有两种常见的封装格式。编码的过程中经常用到AAC bitstreamfilter 。对应音频的AAC 编码格式，视频的是H264 编码还有两种封装格式， FFmpeg中也提供了相应的bitstreamfilter ，可以将MP4封装格式的H264数据包转换成annexb封装格式的H264数据(实际上是裸H264数据) 。
2、iOS利用FFmpeg解码音频数据并播放【ffmpeg编码流程分析】通过FFmepg对音频流数据进行分析解码，然后将解码后的音频数据发送到AudioQueue进行播放。用FFmpeg解析音频数据流，用FFmpeg将音频数据解码成PCM格式，用AudioQueuePlayer播放音频数据。本例以一个苹果原生相机录制的. MOV文件为例，通过FFmpeg对文件进行分析解码，并将解码后的数据放入传输队列。
播放器在回调函数中依次取出队列中的数据进行播放。FFmpegparse 流程FFmpeg解码流程为了每次都能再次播放，需要标记是否是解码后的第一帧数据来重启播放器。还有一点就是使用NSTimer等待音频数据放入队列后再开始播放。因为audioqueue是一种驱动播放模式，所以必须等待音频数据放入传输队列后才能播放。可以从Parse模块获取当前文件对应的FFmepg的context对象AVFormatContext 。因此，可以直接获得音频流解码器信息。AVFrame用作解码的原始音频和视频数据的容器。AVFrame通常是一次分配，然后再分配。
3、MAC/iOS利用FFmpeg解析音视频数据流使用FFmpeg解析音频-视频流，它可以来自标准的RTMP URL或文件。音视频流可以通过解析进一步解码，然后在屏幕上渲染视频，通过扬声器输出音频。FFmpeg框架中的libavformat模块可以通过函数av_read_frame解析音视频流的音视频数据。如果直接使用FFmpeg硬件解码，只需要解析成AVPacket就可以传输到解码模块。
对于视频数据，需要在其NALUHeader中获取(vps)sps、pps、PPS，以备后续使用。使用流程FFmpeg Parse流程以下链接包含了构建iOS所需的FFmpeg环境的详细步骤。有需要可以提前看一下。iOS手动编译构建FFmpeg后，需要先导入到FFmpeg框架中。
4、在ubuntu12.04LTS下成功编译安装带有h264和aac 编码的 ffmpeg的完整...先至少下载yasm、ffmpeg和x264的源代码，具体步骤和这个差不多。通常只用x264 。aac 编码 device有FDK、可视开、FAAC、AACPPlus、内置五种选择。最好用fdk，其他任何一个都可以。通常先编译组件。/配置特定包的设置选项。编译完组件后，最后设置编译ffmpeg 。
5、FFmpeg代码实现流媒体推流(RTSP最近需要实时记录屏幕，并将视频推送到RTSP服务器。具体来说，流程是抓取屏幕内容(位图)并将位图转换成YUV ，然后将YUV 编码转换成H264，再将H264流推送到RTSP服务器；将收集到的PCM 编码作为AAC，然后将AAC推送到RTSP服务器。看过雷神的一篇文章:最简单的基于FFmpeg的流媒体设备(以推送RTMP为例)，将本地视频文件推送到RTMP服务器，不符合我的要求。
我综合了上面两位大佬的思路，找了一些资料来实现这个功能。RTSP服务器使用HappyTime的免费试用版。我捕捉的位图是BGRA格式，所以我用的图像格式是AV_PIX_FMT_BGRA ， cropImage是包含rgba图像的数组调用:由于我是实时捕捉屏幕的，所以设置frame_yuv>pts为当前时间戳，保证正常播放。
Windows系统下6、如何在windows中编译 ffmpeg2.6.1以及NVENC硬编码的尝试FFmpeg的编译过程分为四步:1 .配置编译环境2 。下载FFMPEG 3的代码。编译并获取FFMPEG库(头文件、lib和DLL)4 。在VC中配置。测试1 。配置编译环境1)安装MSys下载文件:bash3.1MSYS1.0.11snapshot.tar.bz2msysCORE1.0.11.tar.gz比如把msysCORE1.0.11.tar.gz解压到X:\msys(以下内容用这个路径描述，X是你安装的盘符) 。
7、 ffmpeg4, 编码解码硬加速的实现步骤基本都是从网上抄来的。主要是3安装nvcodecheaders的版本，需要和自己的驱动保持一致。因为没同意，我装了cuda等也没做成什么事。其中，安装驱动还导致重装系统，这是一个血的教训。(输入命令nvidiasmi检查显卡的驱动版本，检查是否与nvcodecheaders/readme中的匹配) 。比如把它在光盘中解压到目录下，然后编译安装。
8、 ffmpeg将yuv文件编码为mp4最后一个文件是解码mp4的视频流数据，写入yuv的数据文件。本文是逆向操作，即yuv数据文件编码是mp4文件，avformat_alloc_output_context2根据文件名创建视频包上下文对象avio_open，打开视频文件avcodec_find_encoder查找。

推荐阅读

上一篇：家庭财产分析软件

下一篇：定性数据与定量数据分析,数据分析是定性还是定量