关于android:如何在视频系统中捕获和编码音频_Android

How to capture and encode audio in a video system_Android

我正在尝试在 android 中构建一个开源视频系统,因为我们无法访问封闭系统中的数据。在这个系统中,我们可以修改摄像头捕获的原始数据。

我使用 MediaCodec 和 MediaMux 来完成视频数据编码和复用工作,而且效果很好。但我不知道音频部分。我使用 onFramePreview 来获取每一帧并逐帧进行编码/混合工作。但是我如何同时进行音频录制(我的意思是逐帧捕获音频,对其进行编码并将数据发送到 MediaMux)。

我做了一些研究。似乎我们使用audiorecorder来获取音频的原始数据。但是audiorecorder做一个持续的录音工作,我不认为它可以工作。

谁能给我一个提示?谢谢!


像这样创建audioRecorder:

1
2
3
4
5
6
7
8
9
10
11
12
private AudioRecord getRecorderInstance() {
    AudioRecord ar = null;
    try {
        //Get a audiorecord
        int N = AudioRecord.getMinBufferSize(8000,AudioFormat.CHANNEL_IN_MONO,AudioFormat.ENCODING_PCM_16BIT);            
        ar = new AudioRecord(AudioSource.MIC, 8000, AudioFormat.CHANNEL_IN_MONO, AudioFormat.ENCODING_PCM_16BIT, N*10);
    }
    catch (Exception e) {

    }
    return ar; //Returns null if mic is unavailable
}

为编码和复用准备和发送数据,像这样是单独的线程:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
public class MicrophoneInput implements Runnable {
    @Override
    public void run() {
        // Buffer for 200 milliseconds of data, e.g. 400 samples at 8kHz.
        byte[] buffer200ms = new byte[8000 / 10];

        try {
                while (recording) {
                    audioRecorder.read(buffer200ms, 0, buffer200ms.length);

                    //process buffer i.e send to encoder
                    //don’t forget to set correct timestamps synchronized with video
                }
        }
        catch(Throwable x) {        
                //  
        }
    }
}


原创文章,作者:ItWorker,如若转载,请注明出处:https://blog.ytso.com/269006.html

(0)
上一篇 2022年6月20日
下一篇 2022年6月20日

相关推荐

发表回复

登录后才能评论