3531播放mp4的音视频同步的问题

本帖最后由 goodman 于 2016-7-8 14:28 编辑

现在有个MP4视频（h264+aac）， 使用ffmpeg demux 得到h264 和aac 数据, aac是16bit 48K 立体声.
我的代码大体是这样：
[code]
while (1){
     if (av_read_frame(mediaPlayer->_avFormatContext, &avp) == 0) {
            if(avp.stream_index < mediaPlayer->_avFormatContext->nb_streams) {
                AVMediaType type = mediaPlayer->_avFormatContext->streams[avp.stream_index]->codec->codec_type;
                AVCodecID id = mediaPlayer->_avFormatContext->streams[avp.stream_index]->codec->codec_id;
                if(type == AVMEDIA_TYPE_VIDEO && id == AV_CODEC_ID_H264) {  //视频
                    mediaPlayer->pushData(avp.data, avp.size, 0);
                }
                if(type == AVMEDIA_TYPE_AUDIO && id == AV_CODEC_ID_AAC) {   //音频
                        mediaPlayer->addAdtsheader(&avp);
                        if(mediaPlayer->aacdecode(avp.data, avp.size) == 0){   // 解码aac用时很小大概3个ms
                         mediaPlayer->pushData((uint8_t*)mediaPlayer->_fifo.data, frameSize);   // 这里推数据很耗时间，大概为45ms不知道为为什么（一帧AAC）
                        av_free_packet(&avp);
                         coutinue;
                }
            }
            av_free_packet(&avp);
            usleep(40*1000);
        }
}[/code]


说明：音频使用阻塞方式推(改成非阻塞的方式丢数据)
[code]        AUDIO_STREAM_S stStream;
        stStream.pStream = addr;
        stStream.u32Len = len;
        return HI_MPI_ADEC_SendStream(_adecChn, &stStream, HI_TRUE) == HI_SUCCESS ? 0 : -1;          // 也就是这个函数耗时
[/code]

现在的现象是，无法正常播放，声音正常了，视频一卡一卡的。有请做过音视频混合播放的大侠路过帮解决下。
或者我这个方式本身就 有问题。