音视频解码模块阅读笔记

一，在进行音视频解码前,进行平台初始化工作:

InitPlatform(){

...

}

该函数主要完成如下工作：

先清空系统控制信息，视频缓冲区的信息

HI_MPI_SYS_Exit()

HI_MPI_VB_Exit()

接下来设置视频缓冲区

先配置几个视频缓冲区的大小

stVbConf.astCommPool[0].u32BlkSize = 720 * 576 * 2;/*D1*/

stVbConf.astCommPool[0].u32BlkCnt = 10;

stVbConf.astCommPool[1].u32BlkSize = 704 * 576 * 2;/*D1*/

stVbConf.astCommPool[1].u32BlkCnt = 52;

stVbConf.astCommPool[2].u32BlkSize = 384 * 576 * 2;/*2CIF*/

stVbConf.astCommPool[2].u32BlkCnt = 64;

stVbConf.astCommPool[3].u32BlkSize = 384 * 288 * 2;/*CIF*/

stVbConf.astCommPool[3].u32BlkCnt = 20;

设置系统中使用图像的字节对齐数，开发文档推荐配置成16 or 64就可以了，此时不是很明白。

stSysConf.u32AlignWidth=64;

HI_MPI_VB_SetConf(&stVbConf);

视频缓冲区初始化

HI_MPI_VB_Init

二，完成了系统平台的初始化，接下来进行音视频的输入处理。

在视频输入处理中有一个概念必须明确，vi设备端口，hi3520有4个vi设备端口，最大同时支持16ch视频输入。

也就是说1个vi设备端口对应4个视频输入端口。

视频输入的初始化得完成以下几个工作。

设置vi设备端口的属性 HI_MPI_VI_SetPubAttr

|

|

V

vi设备使能 HI_MPI_VI_Enable(ViDev)

|

|

设置vi设备端口接入各个vi通道的属性

在hi3520系统中，3520芯片外的数据是通过ITU-R BT656/601/1120接口或digital camera接口，存入芯片外的内存区域的，

当数据接口为ITU_R BT656时，一个vi设备能支持多个通道，最多支持4个，我们称之为ViChn0,ViChn1,ViChn2,ViChn3.

1,设置vi设备端口属性

设置属性接口函数，VI_DEV ViDevId vi输入设备端口，pstPubAttr设置属性值

HI_S32 HI_MPI_VI_SetPubAttr(VI_DEV ViDevId,const VI_PUB_ATTR_S *pstPubAttr);

typedef struct HiVI_PUB_ATTR_S

{

VI_INPUT_MODE_E enInputMode; /* video input mode */

VI_WORK_MODE_E enWorkMode; /* work mode(only for BT.601) */

VIDEO_NORM_E enViNorm; /* video input normal(only for BT.601) */

HI_BOOL bIsChromaChn; /* whether this device capture chroma data(only for BT.1120) */

HI_BOOL bChromaSwap; /* whether exchange U/V of chroma channel(only for BT.1120) */

} VI_PUB_ATTR_S;

HI_MPI_VI_Enable(ViDev);

2，设置完视频输入设备，接下来设置视频输入通道。

一个视频输入设备对应4个通道。

和视频输入设备设置一样，先设置通道属性

s32Ret=HI_MPI_VI_SetChnAttr(ViDev,ViChn,pstViChnAttr);

再接下来使能通道

s32Ret=HI_MPI_VI_EnableChn(ViDev,ViChn);

设置通道的每秒的帧数，N制下为30，PAL制下为25帧。

s32Ret=HI_MPI_VI_SetSrcFrameRate(ViDev,ViChn,u32SrcFrmRate);

整体上把握一下视频解码的流程，至少也得知道数据是如何采集的

STEP1:模拟信号的采集

模拟信号通过2866芯片采集，转换为数字信号。2866芯片是标准的AD,DA数据转换芯片。在我们的系统中主要实现模拟信号转数字信号输入，数字信号转模拟信号的输出。

2866最大可以同时采集4CH视频信号。

STEP2:模数转换

2866采集的4CH视频信号（模拟）转换为1CH数字信号送3520芯片。对于像本人这样的新手来说，此处可能会有点理解困难，为什么4CH模拟信号

输入2866转换输出的仅仅只是1CH数字信号。这就涉及到点点数电的知识了，数字信号简单讲就是高低电平，高电平代表1，低电平代表0,如何在1CH数字信号

里包括4路VI视频呢？假设下图是2866送出的视频数字信号一个时钟周期内的波形图，

-_--_-_--__---_--_-_--__---_--_-_--__----_--_-_--__----_--_-_--__-----_-

周期的前四个信号 -_-- 第一个信号值为VI1的视频信号，第二信号值为VI2的视频信号，第三个信号值得为VI3的视频信号，第四个信号值得为VI4的视频信号。

STEP3:2866输出视频数据到3520

此时引入一个概念，VI设备，什么是VI设备，对于3520来说，上一步2866采集的4CH模拟信号转换后的一路视频信号就是1个VI设备，该VI设备同时处理包括4路视频数据。

海思的VI模块所做的主要工作就是处理VI设备的4CH视频数据，将视频数据放入内存区域。至于以后这些内存数据是用于视频输出，还是视频编码，就另当别论了。

看了几天的视频输入和视频输出部分的代码，自已也写了一些自已的DEMO程序，慢慢对这一块有了自已的认识，争取早点将一只脚迈入门内吧。

前几次的笔记大多谈到视频输入的处理， 这次想重点谈谈视频输出的处理。

3520支持三种视频输出设备，HD设备,AD设备,SD设备。

typedef enum hiVO_DEV_E

{

VO_DEV_HD = 0, /* high definition device */

VO_DEV_AD = 1, /* assistant device */

VO_DEV_SD = 2, /* spot device */

VO_DEV_BUTT

} VO_DEV_E;

视频输出模块所做的工作大约就是将视频数据从内存中取出来，送相应的显示设备输出。

接下来准备以我们的产品为例，写写视频输出的处理过程。

机器起动是16画面输出，这点是如何实现的？

1 不同的视频输出设备（HD,AD,SD）的视频输出大小是不一样的， 所以我们必须设置进行VI和VO的绑定处理，16画面输出，要求VI视频通道数据分别与16个通道依次绑定

2视频输出设备图形层的大小，AD设备与SD设备设置图像的大小为D1(PAL为720*576, ntsc为720*480),HD设备根据用户设置的分辨率大小设定.

3因为我们的视频输出的是16个画面，所以要求设置VO通道的属性值，主要是大小和坐标，叠加优先级。



当进行切换画面时又是如何处理的？

主要处理过程和上述基本相同， 但还是有些不一样。

1 首先你必须 Disable VO输出

假设你上一次视频为16画面输出，行,先Disable 16个vo通道。

for(i = 0; i < ibind; i ++)//最大通道数

{

if(iRet = (HI_MPI_VO_DisableChn(VoDev,i)) != 0)

{

DEBUG_INFO(("DisableVideoOutput HI_MPI_VO_DisableChn err (0x%x) vochn=%d /n",iRet, i));

//return -1;

}

}

2 设置VI属性。

当切换到单画面时，设置VI采集数据的大小为D1

/*设置VI通道属性，设置为D1大小显示*/

retvalue = HI_MPI_VI_GetChnAttr(channel/4, channel%4, &stViChnAttr);

FAIL_RETURN(retvalue);

stViChnAttr.stCapRect.u32Width = 704;

stViChnAttr.stCapRect.u32Height = (TS_PAL == system)?288:240;

stViChnAttr.bDownScale = HI_FALSE;

stViChnAttr.enCapSel = VI_CAPSEL_BOTH;

retvalue = HI_MPI_VI_SetChnAttr(channel/4, channel%4, &stViChnAttr);

FAIL_RETURN(retvalue);

当切换到四画面，9画面，16画面，设置VI采集数据的大小为CIF.

/*设置VI通道属性，设置为CIF大小显示*/

retvalue = HI_MPI_VI_GetChnAttr(chn/4, chn%4, &stViChnAttr);

FAIL_RETURN(retvalue);

stViChnAttr.stCapRect.u32Width = 704;

stViChnAttr.stCapRect.u32Height = (TS_PAL==system)?288:240;

stViChnAttr.bDownScale = HI_TRUE;

stViChnAttr.enCapSel = VI_CAPSEL_BOTH;

retvalue = HI_MPI_VI_SetChnAttr(chn/4, chn%4, &stViChnAttr);

FAIL_RETURN(retvalue);

视频编解码的基本概念

1.什么是"帧"？

在最早的电影里面，一幅静止的图像被称做一"帧(Frame)"，影片里的画面是每一秒钟有24帧，为什么是24帧，这个数字是怎么来的，因为人类眼睛的视觉暂留现象正好符合每秒24帧的标准，所以用多也没有意义还会浪费电影胶片，增加成本，所以就是24帧。

2.什么是"行"？

在我们用的传统CRT模似电视里面，一个电子束在水平方向的扫描被称之为行，或行扫描。

3.什么是"场"？

在我们用的传统CRT模似电视里面，一个行扫描，按垂直的方向扫描被称之为场，或场扫描。

4. 什么是NTSC制式？

NTSC(National Television System Committee)制式是1952年由美国国家电视制定委员会制定的彩色电视广播标准。美国、加拿大、以及中国台湾、韩国、菲律宾等国家采用的是这种制式。这种制式的彩色带宽为3.58Mhz，伴音带宽为6.0Mhz，每秒30帧画面。

5. 什么是PAL制式？

PAL(Phase Alternating Line)，是1965年制定的电视制，主要应用于中国、香港、中东地区和欧洲一带。这种制式的彩色带宽为4.43Mhz伴音带宽为6.5Mhz，每秒 25帧画面，还有一种是SECAM制式德国地区采用的制式,因为应用比较少，就不多做介绍了。

6. 为何NTSC制为每秒30帧,而PAL制式每秒25帧？

这是因为采用NTSC的国家的市电为110V60HZ，所以电视里的场频信号直接就取样了交流电源的频率60HZ，因为两场组成一帧,所以60除以2等于30正好就是电视的帧数了，而我国的市电为220V50HZ，所以原因同上就是每秒25帧了。

7.什么是逐行？

电视的每帧画面是由若干条水平方向的扫描线组成的、PAL制为625行/帧，NTSC制为525行/帧。如果这一帧画面中所有的行是从上到下一行接一行地连续完成的，或者说扫描顺序是1、2、3……525，我们就称这种扫描方式为逐行扫描。

8.什么是隔行？

实际上，普通电视的一帧画面需要由两遍扫描来完成，第一遍只扫描奇数行，即第l、3、5……525行，第二遍扫描则只扫描偶数行，即第2、4、6……524行，这种扫描方式就是隔行扫描。一幅只含奇数行或偶数行的画面称为一“场(Field)”，其中只含奇数行的场称为奇数场或前场 (Top Field)， 只含偶数行的场称为偶数场或后场(Bottom
Field)。也就是说一个奇数场加上一个偶数场等于一帧(一幅图象)。