日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 运维知识 > Android >内容正文

Android

IOS和Android音频开发总结

發(fā)布時間:2023/12/18 Android 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 IOS和Android音频开发总结 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

要想自己寫一個變聲的函數(shù)或者庫出來,談何容易,所以采用了大家普遍采用的庫SoundTouch。

該庫可以實現(xiàn)改變聲音的速度,節(jié)拍,音調(diào)(這個最重要,可以把聲音的音調(diào)調(diào)高調(diào)低,使之變成男生女生,可以參照湯姆貓)

使用的思路為把整個庫放到不同平臺的底層,使用時只需包含頭文件soundtouch.h即可.

SoundTouch類提供了許多方法,其中最重要的就是setPitch,setRate這幾個調(diào)節(jié)聲音參數(shù)的方法,具體使用時自行設(shè)置參數(shù)。

但是在使用前需要預(yù)先設(shè)置一下其中的幾個函數(shù)的參數(shù)如下:

1 2 3 4 5 6 mSoundTouchInstance->setSetting(SETTING_USE_QUICKSEEK, 0); mSoundTouchInstance->setSetting(SETTING_USE_AA_FILTER, !(0)); mSoundTouchInstance->setSetting(SETTING_AA_FILTER_LENGTH, 32); mSoundTouchInstance->setSetting(SETTING_SEQUENCE_MS, 40); mSoundTouchInstance->setSetting(SETTING_SEEKWINDOW_MS, 16); mSoundTouchInstance->setSetting(SETTING_OVERLAP_MS, 8);

 然后設(shè)置需要的參數(shù)

1 2 3 4 5 mSoundTouchInstance->setChannels(2); mSoundTouchInstance->setSampleRate(8000); mSoundTouchInstance->setPitch(2);

這里解釋一下音頻處理的幾個參數(shù),很重要。

聲道:channals,可以是單聲道和雙聲道,分別對應(yīng)1,2

采樣率:SampleRate ?8000-44100不等,一般是常用的幾個值,安卓里面好像44100是所有設(shè)備都支持的,所以設(shè)置成44100比較保險吧

每個聲道的位數(shù):bitsPerChannel?一般設(shè)置為16

每個幀的聲道數(shù) ChannelsPerFrame ? ?對于pcm數(shù)據(jù)來說,這個是1

還有幾個參數(shù),對于安卓和ios可能說法不太一樣,以上幾個是都要用到的,比較重要,必須得掌握

?

2.Android中實現(xiàn)變聲

因為項目要求錄音要實時播放,所以需要采用讀取音頻數(shù)據(jù)流(PCM格式)來播放,采用的api是AudioRecorder和AudioTrack。

具體的使用方法相關(guān)資料較多,官方文檔也比較詳細(xì)。大致思路就是先初始化:

//initilize
     trbusize=AudioTrack.getMinBufferSize(RECORDER_SAMPLERATE,AudioFormat.CHANNEL_OUT_STEREO,AudioFormat.ENCODING_PCM_16BIT);mAudioTrack = new AudioTrack(AudioManager.STREAM_MUSIC,RECORDER_SAMPLERATE,AudioFormat.CHANNEL_IN_STEREO,AudioFormat.ENCODING_PCM_16BIT,trbusize,AudioTrack.MODE_STREAM);rebusize = AudioRecord.getMinBufferSize(RECORDER_SAMPLERATE, AudioFormat.CHANNEL_IN_STEREO,AudioFormat.ENCODING_PCM_16BIT);mAudioRecord= new AudioRecord(MediaRecorder.AudioSource.MIC,RECORDER_SAMPLERATE,AudioFormat.CHANNEL_IN_STEREO, AudioFormat.ENCODING_PCM_16BIT, rebusize);

這里因為不同設(shè)備支持的參數(shù)可能不同,需要是可以寫一個循環(huán)把所有可能的參數(shù)全試一遍。

之后是錄音和播放,可以分別放到兩個線程里面。一般來說都是把錄音數(shù)據(jù)保存到文件中,然后再進(jìn)行播放,這樣可以應(yīng)付一般的錄音需求。但不足之處在于,錄音時間久了,文件會很大,如果在網(wǎng)絡(luò)上實時播放的話這樣肯定不行。解決方法就是將錄音的數(shù)據(jù)傳到一個緩沖區(qū),然后播放時直接從緩沖區(qū)取走數(shù)據(jù)即可。這個緩沖區(qū)可以考慮用循環(huán)隊列或者在java里面可以直接用一個LinkedList實現(xiàn)。

然后是變聲部分,安卓里面要想用c++庫的話,只能通過jni來實現(xiàn),可以寫幾個函數(shù)。

while(isInstancePlaying){if(l<21){byte[] mbyte=new byte[64];mAudioRecord.read(mbyte,0,64);SoundTouch.getSoundTouch().putSamples(mbyte,0,INPUT_LENGTH);SoundTouch.getSoundTouch().setPitchSemiTones(pitchTone);SoundTouch.getSoundTouch().receiveSamples(mbyte,INPUT_LENGTH);byteArray.add(mbyte);l=byteArray.size();}else{mAudioTrack.write(byteArray.getFirst(),0,64);byteArray.removeFirst();l=byteArray.size();}

代碼中有三個函數(shù)putSamples,setPitchSemiTones,receiveSamples.這三個都是native方法,在SoundTouch庫中分別通過SoundTouch類提供的對應(yīng)函數(shù)實現(xiàn),比較簡單,通過這幾個函數(shù)即可實現(xiàn)聲音的變聲。

l變量是LinkedList(代碼中的byteArray)的長度,當(dāng)小于20時添加到byteArray的末尾,同時AudioTrack不斷讀取數(shù)組中的第一個元素來播放然后刪除該元素。

最后播放完要記得釋放mAudioTrack和mAudioRecorder。通過stop和release方法實現(xiàn)。

?

3.IOS實現(xiàn)變聲

?

因為本人之前沒接觸過ios所以做起來遇到了不少問題,還好最后解決了。

ios里面的音頻處理比起安卓來說感覺要麻煩一些,用到的核心api就是AudioQueue,正在使用之前一定要好好理解一下它的原理,跟安卓不同的是ios播放和錄音都是用的這個api。就相當(dāng)于它一個東西實現(xiàn)了安卓中AudioRecorder和AudioTrack的功能,只不過在播放和錄音過程中內(nèi)部的流程有所變化。

核心思想:

Audio里面有自帶的一個隊列,首先用戶創(chuàng)建若干個(3-6個左右都行)緩沖器用來裝填音頻數(shù)據(jù),在自帶隊列中播放或錄音完后使用用戶自定義的回調(diào)函數(shù)進(jìn)行處理,使得緩沖器能夠被重新利用,并且可以在回調(diào)函數(shù)中實現(xiàn)用戶自定義的一些功能,比如變聲,寫入文件等等操作。官方給了說明圖比較詳細(xì),需要著重理解一下。

首先是錄音的流程圖:

?

?

然后是播放的流程圖:

如何變聲呢?

ios的變聲不需要安卓的jni,因為oc語言可以和c++混編,所以這點相對來說要簡單許多。流程如下:

首先在你的程序中實例化一個SoundTouch類,然后在初始化時將它的參數(shù)設(shè)置好(setSetting),之后在上面所述的回調(diào)函數(shù)里面就可以將錄音得到的數(shù)據(jù)流進(jìn)行處理然后選擇保存到文件或者直接播放。思路就是這樣,但是里面的函數(shù)的參數(shù)相對還是比較繁瑣的,前面原理沒理解的話這邊就很難做下去了。

實時播放?

思路同Android,可以寫一個循環(huán)隊列用來緩存音頻數(shù)據(jù),然后邊錄音往里面?zhèn)鲾?shù)據(jù)邊播放,跟安卓不同的是這些操作需要放到相應(yīng)的回調(diào)函數(shù)里面來實現(xiàn),有個簡單的辦法是在錄音的回調(diào)函數(shù)里面直接播放pcm數(shù)據(jù)。因為數(shù)據(jù)是一塊一塊的進(jìn)來的,每使用完一次緩沖器才會調(diào)用一次回調(diào)函數(shù),可以直接在回調(diào)函數(shù)里面進(jìn)行播放。

?

以上就是兩個平臺上實現(xiàn)錄音和實時播放的簡單介紹,這里面的東西還是蠻多的,值得深入研究。

轉(zhuǎn)載于:https://www.cnblogs.com/feiyiban588/p/5596432.html

總結(jié)

以上是生活随笔為你收集整理的IOS和Android音频开发总结的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。