H.264采集、编码、传输的流程
转载自H.264采集、编码、传输的流程

1 采集到的原始数据放入buf中
2 转化为yuv格式放入yuv
conv.RGB24_to_YV12(buf, yuv,IMAGE_WIDTH, IMAGE_HEIGHT) ;
3 调用编码器进行编码
3.1 从yuv中读取数据到m_pic
read_frame_yuv( &m_Pic, m_pOpt->hin, i_Frame + m_pOpt->i_seek )
m_pOpt->hin即为yuv
3.2 将m_pic编码成nal格式数据
x264_encoder_encode( m_pEnc, &nal, &i_nal, pic, &pic_out )
m_pEnc为编码器句柄
nal为一个数组(一帧可能被编码成多个nal)
3.3 将多个nal格式的数据读到一个m_pdata
x264_nal_encode( m_pData, &i_data, 1, &nal[i] )
1、加上startcode
2、写入nal头部
3、拷贝payload部分
3.4 将m_pdata中数据拷入hout中
write_nalu_bsf( hout, m_pData, i_size ,i_file,dec_out)
dec_out为一块公共数据区域,存放一帧的解码结果,也就是说其中可能包含几个nal的数据
4 调用解码器解码
pdecoder->Decode_frame((char *)VideoCodeDest,inLen,(char *)VideoRGB);
VideoCodeDest为一块公共数据区域,存放一帧的解码结果,也就是说其中可能包含几个nal的数据
输出放到VideoRGB
4.1 取出一个nal的数据去解码
nalLen=GetNextNal(inLen);
通过识别startcode取出一个nal的数据,存放在buf中
consumed_bytes=avcodec_decode_video(avc, picture, &got_picture,(unsigned char*)Buf, nalLen);
avc为编码器句柄
picture存放解码结果
got_picture:没有帧可以被解码则为0
= 有个关键问题
当一帧的原始图像被编码成几个nal:
1.在test264的例子中看到,这几个nal被一块处理,可能会共同写入到结果缓冲区中
2.那么是否这几个nal被解码的结果都是consumed_bytes>0?
3.我的猜想是几个nal的解码结果只有其中一个consumed_bytes>0,其余只会提供参考信息给解码器。
4.是要将nal以流形式还是包形式传输?
第一帧编解码结果:
+ nal[0] {i_ref_idc=0 i_type=6 i_payload=368 ...} x264_nal_t 没有帧被解码
+ nal[1] {i_ref_idc=3 i_type=7 i_payload=19 ...} x264_nal_t 没有帧被解码
+ nal[2] {i_ref_idc=3 i_type=8 i_payload=3 ...} x264_nal_t 没有帧被解码
+ nal[3] {i_ref_idc=3 i_type=5 i_payload=2388 ...} x264_nal_t 被解码
第二帧编解码结果:
+ nal[0] {i_ref_idc=2 i_type=1 i_payload=1278 ...} x264_nal_t 被解码
第n帧编解码结果:
+ nal[0] {i_ref_idc=3 i_type=7 i_payload=19 ...} x264_nal_t 被解码
+ nal[1] {i_ref_idc=3 i_type=8 i_payload=3 ...} x264_nal_t 被解码
+ nal[2] {i_ref_idc=3 i_type=5 i_payload=2342 ...} x264_nal_t 被解码
优先级i_ref_idc为:
enum nal_priority_e
{
NAL_PRIORITY_DISPOSABLE = 0,
NAL_PRIORITY_LOW = 1,
NAL_PRIORITY_HIGH = 2,
NAL_PRIORITY_HIGHEST = 3,
};
nal类型i_type为:
enum nal_unit_type_e
{
NAL_UNKNOWN = 0,
NAL_SLICE = 1,
NAL_SLICE_DPA = 2,
NAL_SLICE_DPB = 3,
NAL_SLICE_DPC = 4,
NAL_SLICE_IDR = 5,
NAL_SEI = 6,
NAL_SPS = 7,
NAL_PPS = 8,
NAL_AUD = 9,
};
H.264采集、编码、传输的流程的更多相关文章
- 【流媒体】 Android 实时视频编码—H.264硬编码
[流媒體] Android 实时视频编码—H.264硬编码 SkySeraph Apr 4th 2012 Email:skyseraph00@163.com 1 硬编码 & 软编码 硬编码: ...
- 转:MediaCoder H.264格式编码参数设置及详解
转: http://mediacoder.com.cn/node/81 由于现在大部分视频转码都选择H.264格式进行编码,同时CUDA编码的画质还达不到x264软编码的质量(如果你对画质无要求,可以 ...
- 【图像处理】DVR H.264视频编码基本知识
视频编码技术基本是由ISO/IEC制定的MPEG-x和ITU-T制定的H.26x两大系列视频编码国际标准的推出.从H.261视频编码建议,到 H.262/3.MPEG-1/2/4等都有一个共同的不断追 ...
- 嵌入式 RTP通话:视频流(H.264)的传输
从摄像头获取的视频数据,经过编码后(当然,也可以不编码,如果你觉得也很ok的话),既可以 是 开始的数据是 00 00 40 00 40 11 C1 8C 94字节) 四.RTP视频传输代码 #d ...
- Android 实时视频编码—H.264硬编码
from://http://www.cnblogs.com/skyseraph/archive/2012/04/04/2431771.html 1 硬编码 & 软编码 硬编码:通过调用And ...
- 新手学习FFmpeg - 调用API完成录屏并进行H.264编码
Screen Record H.264 目前在网络传输视频/音频流都一般会采用H.264进行编码,所以尝试调用FFMPEG API完成Mac录屏功能,同时编码为H.264格式. 在上一篇文章中,通过调 ...
- 视频基础知识:浅谈视频会议中H.264编码标准的技术发展
浅谈视频会议中H.264编码标准的技术发展 浅谈视频会议中H.264编码标准的技术发展 数字视频技术广泛应用于通信.计算机.广播电视等领域,带来了会议电视.可视电话及数字电视.媒体存储等一系列应用,促 ...
- 基于RTP协议的H.264传输
1. 引言 随 着信息产业的发展,人们对信息资源的要求已经逐渐由文字和图片过渡到音频和视频,并越来越强调获取资源的实时性和互动性.但人们又面临着另外一种不可避免 的尴尬,就是在网络上看 ...
- MPEG-4与H.264的区别 , 编码 以及 应用
MPEG4是适用于监控领域的压缩技术 MPEG4于1998年11月公布,原预计1999 年1月投入使用的国际标准MPEG4不仅是针对一定比特率下的视频.音频编码,更加注重多媒体系统的交互性和灵活性.M ...
随机推荐
- Linux中find
Linux中find常见用法示例 ·find path -option [ -print ] [ -exec -ok command ] {} \; find命令的参数 ...
- JS与JAVA数据类型的区别
JavaScript与Java数据类型的区别 阅读目录 Number String Boolean Null Undefined Object 今天开始正式认真学习js,虽然在平常j2ee开发中也 ...
- Linux下程序的机器级表示学习心得
Linux下程序的机器级表示学习心得 上周学习完Linux程序的机器级表示后,对于其中有些还是掌握的不太透彻.对于老师提出的关于本章一些细节的问题还是有不会,所以又重新温习了一下上周的学习内容,以下为 ...
- .net 数据缓存(二)之Redis部署
现在的业务系统越来复杂,大型门户网站内容越来越多,数据库的数据量也越来愈大,所以有了“大数据”这一概念的出现.但是我们都知道当数据库的数据量和访问过于频繁都会影响系统整体性能体验,特别是并发量高的系统 ...
- Android Studio开发学习 - 1. 添加Activity
1. 项目上点右键,New -> Activity -> Blank Activity 这将生成Activity的 Layout.Class .和相关的配置信息(在AndroidManif ...
- String中的equals方法解析 jdk1.7
注 此篇为jdk1.7中的源码解析 equals()方法中的判断分一下步骤 1先判断内存地址是否相同 如果内存地址相同 那么字符串就是相同的 返回true 2 判断当前字符串和参数字是否属于同一类 ...
- 2017 ACM-ICPC 南宁区比赛 Minimum Distance in a Star Graph
2017-09-25 19:58:04 writer:pprp 题意看上去很难很难,但是耐心看看还是能看懂的,给你n位数字 你可以交换第一位和之后的某一位,问你采用最少的步数可以交换成目标 有五组数据 ...
- WinCE数据通讯之Web Service篇
准备写个WinCE平台与数据库服务器数据通讯交互方面的专题文章,今天先整理个Web Service通讯方式. 公司目前的硬件产品平台是WinCE5.0,数据通讯是连接服务器与终端的桥梁,关系着终端的数 ...
- HttpServletRequest request方法详解
//1.获取请求参数 //获取参数的单个值,如有多个则只返回第一个 String parameter1 = request.getParameter("demo"); //获取参数 ...
- 阿里云centOS7.4 ftp连接不上的问题
首先查看是开启21端口 选择ECS-->安全组-->配置规则 增加21端口配置 配置如下