从零开始学习音视频编程技术(十七) 录屏软件开发之音频采集
时间:2016年11月28日 人气:...

前面讲解了如何使用libavdevice采集摄像头图像

同样 libavdevice 也可以采集麦克风的声音。

下面就讲解麦克风声音的采集:


采集声音和采集摄像头本质上没有多大的却别,基本上就是换个名字:

首先还是一样注册libavdevice:

avdevice_register_all();

然后打开音频设备:

    QString audioDeviceName = QStringLiteral("audio=麦克风 (Realtek High Definition Audio)");

    AVInputFormat *ifmt = av_find_input_format("dshow");
    if(avformat_open_input(&pFormatCtx,audioDeviceName.toUtf8().data(),ifmt,NULL)!=0){
        fprintf(stderr,"Couldn't open input stream.(无法打开输入流)
");
        return -1;
    }

其中"audio=麦克风 (Realtek High Definition Audio)"跟之前获取摄像头名字一样的方法,直接使用ffmpeg命令行获取即可,不懂得直接查看之前的教程传送门


成功打开麦克风之后,就是查找流然后打开解码器:

    audioindex = -1;    
    aCodecCtx = NULL;

    for(i=0; i<pFormatCtx->nb_streams; i++)
        if(pFormatCtx->streams[i]->codec->codec_type==AVMEDIA_TYPE_AUDIO)
        {
            audioindex=i;
            break;
        }

    if(audioindex==-1)
    {
        printf("Didn't find a video stream.(没有找到视频流)
");
        return -1;
    }

    aCodecCtx = pFormatCtx->streams[audioindex]->codec;

    aCodec = avcodec_find_decoder(aCodecCtx->codec_id);
    if(aCodec == NULL)
    {
        printf("audio Codec not found.
");
        return -1;
    }

    if(avcodec_open2(aCodecCtx, aCodec,NULL)<0)
    {
        printf("Could not open video codec.
");
        return -1;
    }

可以看出这个操作和打开摄像头的操作并没有多大的区别。

接着就是使用av_read_frame来读取麦克风了:

aFrame=avcodec_alloc_frame();

    int ret, got_frame;

    AVPacket *packet=(AVPacket *)av_malloc(sizeof(AVPacket));

    FILE *fp_pcm=fopen("output.pcm","wb");

    ///这里打印出音频的信息
    qDebug()<<"audio info:";
    qDebug()<<"audio info:"<<aCodecCtx->sample_fmt<<aCodecCtx->bit_rate<<aCodecCtx->sample_rate<<aCodecCtx->channels;

    float Time = 0;

    for(int i=0;;i++)
    {
        if (Time > 30) break; //就采集30秒

        if(av_read_frame(pFormatCtx, packet) < 0)
        {
            break;
        }

        if(packet->stream_index==audioindex)
        {
            ret = avcodec_decode_audio4(aCodecCtx, aFrame, &got_frame, packet);
            if(ret < 0)
            {
                fprintf(stderr,"Audio Error.
");
                return -1;
            }

            if (got_frame)
            {
                int pcmSize = av_samples_get_buffer_size(NULL,aCodecCtx->channels, aFrame->nb_samples,aCodecCtx->sample_fmt, 1);
                uint8_t * pcmBuffer = aFrame->data[0];

                float useTime = aFrame->nb_samples * 1.0 / aCodecCtx->sample_rate;
                Time += useTime;
                qDebug()<<i<<Time<<useTime;
                fwrite(pcmBuffer,1,pcmSize,fp_pcm); //写入文件

            }

        }
        av_free_packet(packet);
    }

    fclose(fp_pcm);

每一帧所发费的时间由aFrame->nb_samples * 1.0 / aCodecCtx->sample_rate;来获得。

上面总共采集了30秒,同时将采集得到的pcm音频数据写入了文件。

打开pcm数据可以使用cool edit这个软件。有需要的可以百度下载。

 pcm是最原始的音频数据,是不带有任何采集率以及声道的信息的。

因此我们需要手动告诉cool edit软件需要打开的pcm数据的采样率和声道信息,否则打开之后会是全部杂音。

我们这里采集到的是44100 双声道的。

接着就可以看到漂亮的波形图了,

cool edit的使用这里就不说了,自行琢磨吧。



完整工程下载地址:http://download.csdn.net/detail/qq214517703/9696049


学习音视频技术欢迎访问 http://blog.yundiantech.com  

音视频技术交流讨论欢迎加 QQ群 121376426