ffmpeg經過解碼得到yuv格式，然後將其轉換成rgb用uiimageview渲染出來，但是這樣效率低。一般是將yuv用opnegl es渲染。
怎麼接收音訊資料？
sensor( 麥克風)：採集pcm格式的資料
常見的音訊壓縮演算法:g711、adpmc、aac
g711的壓縮率大概為1/2,比如從麥克風取樣1280個pcm格式位元組，壓縮（編碼）後為640個g711格式的位元組,客戶端到資料以後，將其解碼還原成1280個pcm格式的位元組
adpmc可以壓縮到1/4,比如從麥克風取樣1280個pcm格式位元組，壓縮（編碼）後為320個adpmc格式的位元組,客戶端到資料以後，將其解碼還原成1280個pcm格式的位元組
如果兩個手機相互實時通訊，會產生回聲，回聲消除有兩種方法：用硬體消除、用軟體消除。
opencl:用於平行計算，主要用在顯示卡上面。
opengl:主要用於3d
音訊相關術語
1.雜訊抑制指的是將屬於背景噪音的部分識別出來，並從音訊幀中過濾掉。3.自動增益為了保證輸出聲訊號的強度穩定性。4.音訊訊雜比 指音響裝置播入時，正常聲音頻號強度與噪音頻號強度的比值。當訊雜比低，小訊號輸入時噪音嚴重，在整個音域的聲音明顯變得渾濁不清，嚴重影響音質。訊雜比的大小是有用訊號功率和雜訊功...
音訊相關引數
5 失真度 有諧波失真 互調失真和瞬態失真之分。諧波失真是指聲音回放中增加了原訊號沒有的高次諧波成分而導致的失真 互調失真影響到的主要是聲音的音調方面 瞬態失真是因為揚聲器具有一定的慣性質量存在，盆體的震動無法跟上瞬間變化的電訊號的震動而導致的原訊號與回放音色之間存在的差異。它在音箱與揚聲器系統中則...
音訊分析相關概念
現在假設某段樂曲有30秒，8 bit取樣，頻率為44100hz，雙聲道，pcm編碼，則樣本總數為2646000個。2 特徵 音量 音高 音色，幀長 幀重疊 幀距 幀率 如上所述，可通過繪製波形的方式研究 特徵。從圖2的波形上看，具有如下特徵 1 長期特徵 一段樂曲 波形變化大，週期無規律 2 短期特...