视频数据处理:解压H.264视频成YUV源文件
首先感谢一下雷神,提供了这么多优质的资源。今天正好有空,使用FFMpeg的API编写如何将H.264的源文件解压成YUV源的过程。
主要步骤
基本步骤分为如下几步,下面,开始讲述用到哪些API来实现这个程序。
代码组织
这里,就不再赘述如何构造一个可以使用的工程了,具体请参考雷神或其它牛人的博客。
Video_Decoder.h
头文件主要就是包含了需要用到的MMFpeg的库。注意,由于MMFpeg主要用C开发,我们写C++程序的时候,务必要加上extern “C”。
Video_Decoder.cpp
#include "Video_Decoder.h"
#define INBUF_SIZE 4096
// 输入输出文件指针
FILE *pFin = NULL;
FILE *pFout = NULL;
// 解码中需要的结构
AVCodec *pCodec = NULL;
AVCodecContext *pCodecCtx = NULL;
AVCodecParserContext *pCodecParserCtx = NULL;
AVFrame *frame = NULL;
AVPacket pkt;
// 打开文件 功能函数1
static int open_io_file(char** argv) {
// 打开输入的码流文件
const char* inputFileName = argv[1];
const char* outputFileName = argv[2];
fopen_s(&pFin, inputFileName, "rb+");
if (!pFin) {
printf("Error: can not open input file. \n");
return -1;
}
fopen_s(&pFout, outputFileName, "wb+");
if (!pFout) {
printf("Error: can not open output file. \n");
return -1;
}
return 0;
};
// 解码器初始化 功能函数2
static int open_decoder()
{
// 注册与编解码相关的组件
avcodec_register_all();
// 初始化pkt,用于接收我们传入给它的码流
av_init_packet(&pkt);
// 查找解码器H.264
pCodec = avcodec_find_decoder(AV_CODEC_ID_H264);
if (!pCodec) {
printf("Error: can not find specified codec!");
return -1;
}
// 配置解码器的环境
pCodecCtx = avcodec_alloc_context3(pCodec);
if (!pCodecCtx) {
printf("Error: can not find specified codec context!");
return -1;
}
// 和编码器不同的地方: 保证输入NULL data的时候不会出错
if (pCodec->capabilities & AV_CODEC_CAP_TRUNCATED){
pCodecCtx->flags = AV_CODEC_CAP_TRUNCATED;
}
// 配置parser的环境
pCodecParserCtx = av_parser_init(AV_CODEC_ID_H264);
if (!pCodecParserCtx)
{
printf("Error: alloc parser failed. \n");
return -1;
}
// 看看pCodec能否打开,如果可以打开,则继续
if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0)
{
printf("Error: Opening Codec failed! \n");
return -1;
}
// frame
frame = av_frame_alloc();
if (!frame)
{
printf("Error: alloc avframe failed. \n");
return -1;
}
return 0;
};
// 写出文件 功能函数3
static void write_out_yuv_frame(AVFrame *frame) {
uint8_t **pBuf = frame->data;
int *pStride = frame->linesize;
for (int color_idx = 0; color_idx < 3; color_idx++) {
int nWidth = color_idx == 0 ? frame->width : frame->width / 2;
int nHeight = color_idx == 0 ? frame->height : frame->height / 2;
for (int idx = 0; idx < nHeight; idx++) {
// 逐行写入
fwrite(pBuf[color_idx], 1, nWidth, pFout);
pBuf[color_idx] += pStride[color_idx];
}
// 刷新一下
fflush(pFout);
}
};
// 收尾工作:关闭输入输出文件以及环境回收。 功能函数4
static void close() {
fclose(pFin);
fclose(pFout);
avcodec_close(pCodecCtx);
av_free(pCodecCtx);
av_frame_free(&frame);
}
int main(int argc, char** argv) {
avcodec_register_all();
// 从输入的码流文件中保存数据的内存缓存大小 4096 + 32
uint8_t intbuf[INBUF_SIZE + AV_INPUT_BUFFER_PADDING_SIZE];
if (open_io_file(argv) < 0) {
return -1;
}
else {
printf("成功打开文件 \n");
}
if (open_decoder() < 0) {
return -1;
}
else {
printf("成功打开解码器 \n");
}
// 循环读取
// uDataSize 表示一次读取到缓存中的长度
// got_frame 表示是否完整的解码了一个像素的数据
int uDataSize = 0, len = 0; // uDataSize不能用uint8_t,要用int
int got_frame = 0;
uint8_t * pDataPtr = NULL;
while (true) {
// 把pFin的数据读到intbuf中
uDataSize = fread_s(intbuf, INBUF_SIZE, 1, INBUF_SIZE, pFin);
if (uDataSize == 0) {
break;
}
// 解析成Packet包,这块也是跟压缩不一样的地方。
// 首先要用pDataPtr指向缓存空间
pDataPtr = intbuf;
while (uDataSize > 0) {
// 数据在pkt里面
len = av_parser_parse2(pCodecParserCtx, pCodecCtx,
&pkt.data, &pkt.size,
pDataPtr, uDataSize,
AV_NOPTS_VALUE, AV_NOPTS_VALUE, AV_NOPTS_VALUE);
pDataPtr += len;
uDataSize -= len;
if (pkt.size == 0) {
continue;
}
// 成功解析出一个packet的码流
printf("Parse 1 packet. \n");
int ret = avcodec_decode_video2(pCodecCtx, frame, &got_frame, &pkt);
if (ret < 0) {
printf("解码出现错误!\n");
return -1;
}
// 如果got_frame不为0,那么表示解析出了图像。
if (got_frame) {
// 打印输出图像的宽和髙
printf("Decoded 1 frame OK! Width x Height: (%d x %d)\n", frame->width, frame->height);
write_out_yuv_frame(frame);
}
}
};
// 将剩余数据输出
pkt.data = NULL;
pkt.size = 0;
while (true) {
int ret = avcodec_decode_video2(pCodecCtx, frame, &got_frame, &pkt);
if (ret < 0) {
printf("解码出现错误!\n");
return -1;
}
// 如果got_frame为1,那么表示解析出了图像。
if (got_frame) {
// 打印输出图像的宽和髙
printf("Flush decoder; Decoded 1 frame OK! Width x Height: (%d x %d)\n", frame->width, frame->height);
write_out_yuv_frame(frame);
}
else {
break;
}
}
close();
return 0;
}
输入和输出
这里,我们的输入是一个后缀为.264的文件:
输出结果为:
可以看出,压缩比接近50%。对于视频服务提供商来说,视频压缩技术这块可以节省相当大的一笔带宽和服务器开支,是非常有价值的。同时,也降低了用户的观看成本。
智能推荐
音视频学习(一):RGB,YUV数据处理
学习博客:https://blog.csdn.net/leixiaohua1020/article/details/50534150 尊重原创,请读原文 c/c++小白,大神绕道,勿喷。 1. 分离YUV420P像素数据中的Y、U、V分量 code 说明: 为什么要用malloc声明w ×\times× h ×\times× 3/2的内存空间 fop...
Layui parent.layui.open弹框之Iframe 传值处理
Layui open弹框获取值的方法 介绍:Layui 弹框之Iframe传值处理 我的想法 解决 子页面 获取 父页面方法以及元素。 上代码,看图片 原创作品,欢迎来讨论! 介绍:Layui 弹框之Iframe传值处理 本人在使用到layui的iframe版 ,里面使用到了弹框 。 普通弹框:layui.open(); 像这种传递值都没什么问题 , 子页面获取父页面值 或者父页面获取子页面值 全...
外置Tomcat无法使用devtools实现热部署
练手的项目每次有源码或者页面更新都需要重新启动,不能忍,热部署走一波 这个项目是用外置Tomcat启动的 项目层级目录 模块依赖关系:service 依赖于 model 依赖于 api (启动类在service模块中) 引入devTools依赖,确定相关idea配置无误后,发现热部署没有生效 得出结论: devTools无法对使用对外置的tomcat运行的项目生效 于是在网上搜索外置tomcat项...
C++跨平台库QT学习7 使用UnitTest单元测试入门
C++跨平台库QT学习7 使用UnitTest单元测试入门 一、新建子目录项目 二、新建控制台项目 三、新建测试用例子目录项目 mycalctest.pro文件内容: 测试用例文件test_mycalctesttest.cpp 在子项目`mycalctest`点右键、运行 一、新建子目录项目 在QT点击菜单 文件-新建文件或项目-其他项目-子目录项目: 二、新建控制台项目 然后继续建一个子项目: ...
Python实用模块(二十五)loguru
软硬件环境 windows 10 64bits anaconda with python 3.7 loguru 0.5.3 前言 Python实用模块(十四)logging https://xugaoxiang.com/2019/12/04/python-module-logging 已 经介绍过了python内置日志模块logging。我们要使用logging,一般来讲,都是需要进行一...
猜你喜欢
Glide图片加载框架的使用简介与功能介绍
Glide图片加载框架的使用简介 . 1. 在app/build.gradle文件当中添加如下依赖: 2. 在AndroidManifest.xml中声明一下网络权限才行: 3. 开始使用Glide加载图片 with()方法的介绍 作用: 用于创建一个加载图片的实例;with()方法可以接收Context、Activity或者Fragment类型的参数 注意: with()方法中传入的实例会决定G...
编写过滤器解决全局乱码问题
过滤器编写步骤 编写一个类实现javax.servlet.Filter接口 重写接口中所有的方法,其中doFilter方法执行过滤的功能 配置过滤器 在web.xml中配置 使用注解@WebFilter 解决乱码需要添加这句代码:req.setCharacterEncoding(“utf-8”); 字符集与网页的编码要一致 EncodingFilter.java: 过滤器的...
HTML+CSS+JS做一个简易音乐播放器
先给大家看下效果: 实现功能:音乐播放,歌词跟随进度滚动,中间随着音乐播放图片360度旋转 文件目录: 做一个播放器,音乐和歌词事先要下载好,搜一些自己喜欢的封面,让图片360度旋转的样式,通过按钮增删样式达到跟音乐同步进行: 其中歌词匹配才是让我头疼的,所有JS代码部分: 需要所有源码,可以去github上自行下载: https://github.com/lzs1996/MusicPlayer....
Ecplise(jsp文件)导入css文件路径没错,但是没有样式(不生效/无效)
一、检查css文件的【路径】是否正确 1、:将页面在【浏览器】打开,按【Ctrl+u】,查看【页面源代码】(也可右键点击) 若页面进行【跳转】------>说明css路径没错 二、若路径有问题 参考链接: 1、Jsp中引入css等外部文件路径问题 https://blog.csdn.net/prospective0821/article/details/79775626?utm_medium...
自定义View——仿支付宝支付弹窗界面
上面这个是采用自定view方式实现的一个仿支付宝支付弹窗的效果; 1、自定义view并初始化自定义属性 继承自EditText的话可以用使用EditText中的一些属性和方法,在初始化完自定义属性后要记得调用recycle()方法进行回收; 2、初始化画笔 在第三个构造函数中调用就可以了, 3、在onDraw()方法中进行绘制 在绘制的时候先要计算出一个密码所占的宽度 获取到一个密码的宽度后就可以...
