海思HI3536 audio 双声道播放音频
一、说明：
- 海思对音频的支持并不像视频的支持那么全面，这里也有版权受限的原因。所以咋们可以移植一些其他的开源解码编码库来完善海思平台这一方面的不足。
- 问题描述：海思提供了File -> decode -> AO 的样例demo，但是设置的是单声道模式，播放的也是单声道音频。那我们如何修改为双声道立体声模式播放立体声音频？
- 解决思路：（1）设置为立体声模式尝试播放立体声音频。（2）开两路AO通道播放两路单声道音频达成立体声播放目的。
二、代码修改
方案一
- 代码路径
\Hi3536 V100R001C02SPC060\01.software\board\mpp_master\sample\audio\sample_audio.c修改为立体声模式
AIO_ATTR_S stAioAttr;
stAioAttr.enSamplerate = AUDIO_SAMPLE_RATE_8000; //音频采样率
stAioAttr.enBitwidth = AUDIO_BIT_WIDTH_16; //采样长度
stAioAttr.enWorkmode = AIO_MODE_I2S_MASTER; //I2S主模式
stAioAttr.enSoundmode = AUDIO_SOUND_MODE_MONO; //单声道模式
stAioAttr.u32EXFlag = 1;
stAioAttr.u32FrmNum = 30; //缓存帧数
stAioAttr.u32PtNumPerFrm = SAMPLE_AUDIO_PTNUMPERFRM; //point num per frame (80/160/240/320/480/1024/2048)
stAioAttr.u32ChnCnt = 1; //通道个数 valid value:1/2/4/8
stAioAttr.u32ClkChnCnt = 2; //channel number on FS, valid value:1/2/4/8/16
stAioAttr.u32ClkSel = 0; //0: AI and AO clock is separate
// 1: AI and AO clock is inseparate, AI use AO's clock
- 我们先配置为立体声模式
static PAYLOAD_TYPE_E gs_enPayloadType = PT_LPCM; //小端序s16采样长度的pcm音频
stAioAttr.enSoundmode = AUDIO_SOUND_MODE_STEREO;
stAioAttr.u32ChnCnt = 2;
- 准备一个立体声的音频：
大端序数据格式
ffmpeg -i test.mp3 -f s16be -ar 8000 -ac 2 -acodec pcm_s16be pcm8k.pcm
小端序数据格式
ffmpeg -i test.mp3 -f s16le -ar 8000 -ac 2 -acodec pcm_s16le pcm8k.pcm
说明:
-acodec pcm_s16be：输出pcm格式，采用signed 16编码，字节序为大尾端（小尾端为le)；
-ar 8000: 采样率为8000
-ac 2: 声道数为2
我们这里用的是小端序s16 8k 双声道的pcm音频数据给到海思进行解码后给到ao播放，注意先使用VLC 播放器播放下你的pcm文件看是否能正常播放以及是单声道还是立体声。
注意海思设置立体声时
下面注意的这段话，双声道模式只需要对ao一半的通道进行操作就行，也就是你如果ao chn1 chn2来播放双声道的话那只需要初始化chn1就行，chn2海思内部会做操作。
SAMPLE_COMM_AUDIO_StartAo
for (i = 0; i < 1 /*s32AoChnCnt*/; i++) //只需要初始化一路，不然会报通道1无效（通道0有效）
{
}
读者可以试一下，我这边遇到了问题
报错：
[Func]:AoCheckFrameInfo [Line]:1862 [Info]:Soundmode(0), stAioAttr.enSoundmode(1)！
[Func]:HI_MPI_AO_SendFrame [Line]:2142 [Info]:Ao dev: 0, ao chn:0, frame info error.
从错误中可以获取到信息是输入到AO的音频帧数据是Soundmode(0)即mono模式的，而Ao当前设置的是stereo模式，所以我断定是音频解码器解立体声是按单声道模式解出来的。所以给到ao的数据才会报这样的错误。
抱歉让读者看了这么久，结果这个方案是存在缺陷的，所以经过验证这个最佳解决方式不可行，咋们另寻它法。file（s16le_pcm STEREO）->decode(PT_LPCM chn0)->AO(chn0 chn1) fail.
方案二
我们使用单声道播放出来的音频是可以正常播放的ffmpeg -i test.mp3 -f s16be -ar 8000 -ac 1 -acodec pcm_s16be pcm8k.pcm , ac设置成1. 当然播放出来只有一边耳机有声音。那我们可以将decode解码后的音频输送到ao的chn0和chn1不就能实现双声道播放吗。虽然这不是一个立体声了，但是起码解决了我们想要两边耳机都有声音的目的。
stAioAttr.enSamplerate = AUDIO_SAMPLE_RATE_8000;
stAioAttr.enBitwidth = AUDIO_BIT_WIDTH_16;
stAioAttr.enWorkmode = AIO_MODE_I2S_MASTER;
stAioAttr.enSoundmode = AUDIO_SOUND_MODE_MONO;
stAioAttr.u32EXFlag = 1;
stAioAttr.u32FrmNum = 30;
stAioAttr.u32PtNumPerFrm = SAMPLE_AUDIO_PTNUMPERFRM;
stAioAttr.u32ChnCnt = 2; //这里要改为2 ！！！！！
stAioAttr.u32ClkChnCnt = 2;
stAioAttr.u32ClkSel = 0;
s32Ret = HI_MPI_AO_EnableChn(AoDev, AoChn);
if (HI_SUCCESS != s32Ret)
{
printf("add %s: HI_MPI_AO_EnableChn(1) failed with %#x!\n", __FUNCTION__,s32Ret);
return HI_FAILURE;
}
s32Ret = HI_MPI_AO_EnableChn(AoDev, AoChn+1);
if (HI_SUCCESS != s32Ret)
{
printf("add %s: HI_MPI_AO_EnableChn(1) failed with %#x!\n", __FUNCTION__,s32Ret);
return HI_FAILURE;
}
s32Ret = SAMPLE_COMM_AUDIO_AoBindAdec(AoDev, AoChn, AdChn);
if (s32Ret != HI_SUCCESS)
{
SAMPLE_DBG(s32Ret);
return HI_FAILURE;
}
s32Ret = SAMPLE_COMM_AUDIO_AoBindAdec(AoDev, AoChn+1, AdChn);
if (s32Ret != HI_SUCCESS)
{
SAMPLE_DBG(s32Ret);
return HI_FAILURE;
}
//adecode chn 0 |- ao chn0
// |- ao chn1
准备好单声道音频,重新编译程序再运行。可以听到两边耳机都有声音输出。
三、总结
网上对海思音频讲解的内容不多，其实海思是可以实现立体声的但是file->decode->ao这样的方式decode好像不支持解码立体声（LPCM），网上有说pcm就是单声道的。但是我用VLC也可以正常播放立体声出来~。通过阅读海思的手册。可以看到这样一个接口
HI_S32 HI_MPI_AO_SendFrame(AUDIO_DEV AoDevId, AO_CHN AoChn, const AUDIO_FRAME_S *pstData, HI_S32 s32MilliSec);
//参数：const AUDIO_FRAME_S *pstData
typedef struct hiAUDIO_FRAME_S
{
AUDIO_BIT_WIDTH_E enBitwidth; /*audio frame bitwidth*/
AUDIO_SOUND_MODE_E enSoundmode; /*audio frame momo or stereo mode*/
HI_VOID *pVirAddr[2];
HI_U32 u32PhyAddr[2];
HI_U64 u64TimeStamp; /*audio frame timestamp*/
HI_U32 u32Seq; /*audio frame seq*/
HI_U32 u32Len; /*data lenth per channel in frame*/
HI_U32 u32PoolId[2];
} AUDIO_FRAME_S;
想用这个接口播放双声道立体声音频需要分开左右声道数据~ ，读者有没有试过这个接口的？有没有比较好的方式来讲左右声道的数据分开传递？有的话还请分享讨论。谢谢。