h264解码如何实时h264编码及aac编码

h264解码  时间:2021-08-05  阅读:()

为什么大多数都是h264编码的?

mpeg2已经是好几乎10年前出来的标准了,因为当时硬件的限制,注定mpeg2算法的画质的局限性。

而h264是mpeg组织定下的新业界标准,更受到次世代储存媒体的应用。

而h264本身来说,拥有许多先进技术,具体稍微网上搜一下就可以了。

h264格式用什么样的播放器

h264是视频编码标准,支持h264解码的播放器都可以。

比如vlc的VLC Player,ffmpeg的ffmpeg Player,暴风影音,还有Nero Player等。

如何实时h264编码及aac编码

1. 简单介绍   首先是捕获,这里采用了DirectShow的方式,对它进行了一定程度的封装,包括音视频。

好处是直接使用native api,你可以做想做的任何修改,坏处是,不能跨平台,采集音视频这种应用,linux平台也是需要滴呀。

有跨平台的做法,对视频,可以使用OpenCV,对音频,可以使用OpenAL或PortAudio等,这样就行了。

  编码可以选择的余地比较大,对视频来讲,有H264, MPEG-4, WebM/VP8, Theora等,音频有Speex, AAC, Ogg/Vorbis等,它们都有相应的开源项目方案,我采用的是x264进行H264编码,libfaac进行aac编码,之后是否更改编码方案,等具体项目需求再说了。

这里提一下WebM,Google牵头的项目,完全开放和自由,使用VP8和Vorbis编码,webm(mkv)封装,有多家巨头支持,目的是想要取代当前的H264视频编码,号称比后者更加优秀,我没有测试过实际效果。

不过有商业公司牵头就是不一样,各项支持都很全面,有时间了关注一下。

  2. 逻辑和流程   基本的思想是实现dshow ISampleGrabberCB接口,通过回调来保存每一个buffer。

除了界面线程和dshow自己的线程之外,我们启动了两个线程,AudioEncoderThread和VideoEncoderThread,分别从SampleGrabber中取出数据,调用编码器进行编码,编码后的文件可以直接输出。

看图:   程序是用VS2010构建的,看张工程截图:   Base下面的是对系统API的一些简单封装,主要是线程和锁。

我这里简单也封装的了一下dshow的捕获过程,包括graph builder的创建,filter的连接等。

directshow是出了名的难用,没办法,难用也得用。

因为是VS2010,调用的Windows SDK 7.1中的dshow,没有qedit.h这个文件,而它正式定义ISampleGrabberCB的。

不急,系统中还是有qedit.dll的,我们要做的就是从Windows SDK 6.0中,把它拷过来,然后在stdafx.h中加入这几行代码,就可以了   1 #pragma include_alias( "dxtrans.h", "qedit.h" )   2 #define __IDxtCompositor_INTERFACE_DEFINED__   3 #define __IDxtAlphaSetter_INTERFACE_DEFINED__   4 #define __IDxtJpeg_INTERFACE_DEFINED__   5 #define __IDxtKey_INTERFACE_DEFINED__   6 #include "qedit.h"   3. 音视频编码   相关文件:   Encoder下就是音视频编码相关的代码。

X264Encoder封装了调用x264编码器的操作,FAACEncoder封装了调用libfaac编码器的操作,VideoEncoderThread和AudioEncoderThread负责主要的流程。

下面我把关键代码贴出来,大家可以参考一下。

  A. 视频编码线程   主要流程是首先初始化x264编码器,然后开始循环调用DSVideoGraph,从SampleGrabber中取出视频帧,调用x264进行编码,流程比较简单,调用的频率就是你想要获取的视频帧率。

要注意的一点是,x264进行编码比较耗时,在计算线程Sleep时间时,要把这个过程消耗的时间算上,以免采集的视频帧率错误。

  B. 音频编码线程   主要流程和视频编码线程相同,也是初始化FAAC编码器,然后循环调用DSAudioGraph,从SampleGrabber中取出视频帧,调用faac进行编码。

和视频不同的是,音频的sample的频率是非常快的,所以几乎要不断的进行采集,但前提是SampleGrabber中捕获到新数据了才行,不然你的程序cpu就100%了,下面代码中IsBufferAvailaber()就是做这个检测的。

  调用faac进行编码的时候,有点需要注意,大家特别注意下,不然编码出来的音频会很不正常,搞不好的话会很头疼的。

先看下faac.h的相关接口   1 faacEncHandle FAACAPI faacEncOpen(unsigned long sampleRate, unsigned int numChannels,2 unsigned long *inputSamples, unsigned long *maxOutputBytes);3 4 int FAACAPI faacEncEncode(faacEncHandle hEncoder, int32_t * inputBuffer, unsigned int samplesInput,5 unsigned char *outputBuffer, unsigned int bufferSize);   faacEncEncode第三个参数指的是传入的sample的个数,这个值要和调用faacEncOpen返回的inputSamples相等。

要做到这点,就要在dshow中设置好buffsize,公式是:   BufferSize = aac_frame_len * channels * wBytesPerSample// aac_frame_len = 1024

RAKsmart裸机云/云服务器/VPS全场7折,独立服务器限量秒杀$30/月起

适逢中国农历新年,RAKsmart也发布了2月促销活动,裸机云、云服务器、VPS主机全场7折优惠,新用户注册送10美元,独立服务器每天限量秒杀最低30.62美元/月起,美国洛杉矶/圣何塞、日本、香港站群服务器大量补货,1-10Gbps大带宽、高IO等特色服务器抄底价格,机器可选大陆优化、国际BGP、精品网及CN2等线路,感兴趣的朋友可以持续关注下。裸机云新品7折,秒杀产品5台/天优惠码:Bare-...

宝塔面板批量设置站点404页面

今天遇到一个网友,他在一个服务器中搭建有十几个网站,但是他之前都是采集站点数据很大,但是现在他删除数据之后希望设置可能有索引的文章给予404跳转页面。虽然他程序有默认的404页面,但是达不到他引流的目的,他希望设置统一的404页面。实际上设置还是很简单的,我们找到他是Nginx还是Apache,直接在引擎配置文件中设置即可。这里有看到他采用的是宝塔面板,直接在他的Nginx中设置。这里我们找到当前...

Virtono:圣何塞VPS七五折月付2.2欧元起,免费双倍内存

Virtono是一家成立于2014年的国外VPS主机商,提供VPS和服务器租用等产品,商家支持PayPal、信用卡、支付宝等国内外付款方式,可选数据中心共7个:罗马尼亚2个,美国3个(圣何塞、达拉斯、迈阿密),英国和德国各1个。目前,商家针对美国圣何塞机房VPS提供75折优惠码,同时,下单后在LET回复订单号还能获得双倍内存的升级。下面以圣何塞为例,分享几款VPS主机配置信息。Cloud VPSC...

h264解码为你推荐
getsockoptsocket的send()方法的发送目的地址放在哪个参数里面?boltzmann波尔兹曼常数的值是多少qsv视频格式转换器QSV格式的视频用什么格式转换器可以转换?小蓝条我现在使用的是迅雷7、看空间的时候总会出现一个小蓝条写着下载,总是误点然后迅雷就弹出来了怎么解决?手机壳生产厂家寻找制作手机壳的厂家有哪些?充值卡充值移动如何用充值卡充话费dreamweaver序列号DW序列号是多少啊空间图片QQ空间图片廖华100个成语典故及其历史人物故事 南京廖华网页错误详细信息我为什么不可以收货那 网页错误详细信息
独立ip虚拟主机 美国linux主机 godaddy域名解析 域名停靠一青草视频 如何注册中文域名 已经备案域名 t牌 10t等于多少g godaddy支付宝 监控宝 免费网络电视 本网站服务器在美国 gg广告 促正网秒杀 网站在线扫描 闪讯官网 便宜空间 带宽租赁 百度云加速 全能空间 更多