Android中的实时音频处理

问题描述 投票:34回答:5

我正在尝试找出如何编写可实时解码音频莫尔斯电码的应用程序。我找到了this document,它解释了如何在Android中录制来自麦克风的音频。我想知道的是,是否可以从麦克风访问原始输入,或者是否必须将其写入/读取到文件中。

谢谢。

android audio real-time
5个回答
24
投票

如果使用MediaRecorder(上面的示例),它将压缩的音频保存到文件中。

如果使用AudioRecord,则可以直接获取音频样本。

是,您想做的事应该可以。


6
投票

使用AudioRecord太过分了。只需每1000毫秒检查一次MediaRecorder.getMaxAmplitude()即可获得较大的噪音与静音。

如果您确实需要分析波形,那么是的,您需要AudioRecord。获取原始数据并计算一些与您关心的原始字节部分的均方根类似的东西,以了解音量。

但是,当MediaRecorder.getMaxAmplitude()如此易于使用时,为什么要做所有这些呢?

请参阅此答案中的代码:this question


6
投票

[麻省理工学院媒体实验室有一个名为funf的传感框架:http://code.google.com/p/funf-open-sensing-framework/他们已经创建了用于音频输入和一些分析(FFT等)的类,据我所知还实现了保存到文件或上传,并且它们处理了电话上可用的大多数传感器。您也可以从他们编写的代码中获得启发,我认为这非常不错。


0
投票

我已经找到一种方法。基本上,您需要运行一个新线程,在其中继续调用myAndroidRecord.read()。在此调用之后,循环访问缓冲区中的所有条目,您可以实时查看原始值。下面是Main活动的代码示例

package com.example.mainproject;

import androidx.appcompat.app.AppCompatActivity;
import androidx.core.content.ContextCompat;
import androidx.core.app.ActivityCompat;


import android.content.pm.PackageManager;
import android.Manifest;

import android.content.Context;
import android.media.AudioRecord;
import android.media.MediaRecorder;
import android.widget.TextView;
import android.media.AudioManager;
import android.media.AudioFormat;
import android.os.Bundle;



import java.util.Arrays;

public class MainActivity extends AppCompatActivity {

    private AudioManager myAudioManager;
    private static final int REQUEST_RECORD_AUDIO_PERMISSION = 200;
    // Requesting permission to RECORD_AUDIO
    private boolean permissionToRecordAccepted = false;
    private String [] permissions = {Manifest.permission.RECORD_AUDIO};

    private static final int PERMISSION_RECORD_AUDIO = 0;
    Thread mThread;

    @Override
    public void onRequestPermissionsResult(int requestCode,  String[] permissions,  int[] grantResults) {
        super.onRequestPermissionsResult(requestCode, permissions, grantResults);
        switch (requestCode){
            case REQUEST_RECORD_AUDIO_PERMISSION:
                permissionToRecordAccepted  = grantResults[0] == PackageManager.PERMISSION_GRANTED;
                break;
        }
        if (!permissionToRecordAccepted ) finish();

    }

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        if(ContextCompat.checkSelfPermission(this,Manifest.permission.RECORD_AUDIO) != PackageManager.PERMISSION_GRANTED){
            if (ActivityCompat.shouldShowRequestPermissionRationale(this,
                    Manifest.permission.RECORD_AUDIO)) {
                // Show an explanation to the user *asynchronously* -- don't block
                // this thread waiting for the user's response! After the user
                // sees the explanation, try again to request the permission.
                ActivityCompat.requestPermissions(this,
                        new String[] { Manifest.permission.RECORD_AUDIO },
                        PERMISSION_RECORD_AUDIO);
                return;
            } else {
                // No explanation needed; request the permission
                ActivityCompat.requestPermissions(this,
                        new String[]{Manifest.permission.RECORD_AUDIO},
                        1);
                ActivityCompat.requestPermissions(this,
                        new String[] { Manifest.permission.RECORD_AUDIO },
                        PERMISSION_RECORD_AUDIO);

                // MY_PERMISSIONS_REQUEST_READ_CONTACTS is an
                // app-defined int constant. The callback method gets the
                // result of the request.
            }
        }else{

            myAudioManager = (AudioManager)getSystemService(Context.AUDIO_SERVICE);
            String x = myAudioManager.getProperty(AudioManager.PROPERTY_SUPPORT_AUDIO_SOURCE_UNPROCESSED);

            runOnUiThread(()->{
                TextView tvAccXValue = findViewById(R.id.raw_available);
                tvAccXValue.setText(x);
            });

            mThread = new Thread(new Runnable() {
                @Override
                public void run() {
                    record();
                }
            });
            mThread.start();
        }
    }

    private void record(){
        int audioSource = MediaRecorder.AudioSource.MIC;
        int samplingRate = 11025;
        int channelConfig = AudioFormat.CHANNEL_IN_DEFAULT;
        int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
        int bufferSize = AudioRecord.getMinBufferSize(samplingRate,channelConfig,audioFormat);

        short[] buffer = new short[bufferSize/4];
        AudioRecord myRecord = new AudioRecord(audioSource,samplingRate,channelConfig,audioFormat,bufferSize);

        myRecord.startRecording();

        int noAllRead = 0;
        while(true){
            int bufferResults = myRecord.read(buffer,0,bufferSize/4);
            noAllRead += bufferResults;
            int ii = noAllRead;
            for (int i = 0;i<bufferResults;i++){
                int val = buffer[i];
                runOnUiThread(()->{
                    TextView raw_value = findViewById(R.id.sensor_value);
                    raw_value.setText(String.valueOf(val));
                    TextView no_read = findViewById(R.id.no_read_val);
                    no_read.setText(String.valueOf(ii));
                });
            }

        }
    }
}

这只是一个演示,在实际应用中,您需要更多地考虑如何以及何时停止正在运行的线程。此示例将无限期运行,直到您退出应用为止。

与UI更新有关的代码,例如TextView raw_value = findViewById(R.id.sensor_value);特定于此示例,您应该定义自己的代码。

int ii = noAllRead;int val = buffer[i];是必需的,因为Java确实允许您将非有效的最终变量放入lambda方法中。


-2
投票

似乎必须先将其转储到文件中。

[如果您窥视android.media.AudioRecord source,本机音频数据字节缓冲区不公开给公共API。

根据我的经验,已经为Android构建了音频合成器,很难实现实时性能并保持音频保真度。摩尔斯电码的“翻译器”当然是可行的,听起来像是一个有趣的小项目。祝好运!

© www.soinside.com 2019 - 2024. All rights reserved.