音視頻、多媒體應(yīng)用解決方案指南

目前，音視頻編解碼技術(shù)正在延伸到包括消費(fèi)類(lèi)電子、智能家居、智能交通、工業(yè)控制、航空航天、國(guó)防軍事等各行各業(yè)。其中，基于網(wǎng)絡(luò)的多媒體應(yīng)用正變得越來(lái)越廣泛，對(duì)于音視頻處理的技術(shù)要求也越來(lái)越復(fù)雜。對(duì)于如何評(píng)估選擇合適的多媒體解決方案，本文給出一些參考。

 

1為什么要使用編解碼技術(shù)

 

原始的視頻數(shù)據(jù)量非常大，需要占用非常高的帶寬，如果需要通過(guò)網(wǎng)絡(luò)傳輸必須在保證在一定的圖像質(zhì)量的前提下通過(guò)壓縮技術(shù)盡量降低視頻資料的碼率，以適應(yīng)不同的網(wǎng)絡(luò)條件，減少傳輸、存儲(chǔ)的負(fù)擔(dān)。因此，視頻壓縮算法的效率決定了多媒體產(chǎn)品的圖像質(zhì)量和應(yīng)用前景。

 

2視頻的主要性能指標(biāo)

 

1） 編解碼格式（format），即視頻是以何種編解碼技術(shù)進(jìn)行壓縮、解壓縮的。目前流行的視頻格式有：MPEG1/2/4、H.263、H.264、AVS、RM/RMVB、WMV…

2） 分辨率（resolution），即直觀的畫(huà)面像素、大小。一般的規(guī)格有CIF（352*288），QCIF（即四分之一CIF，176*144），D1（720*576），VGA（640*480），QVGA（320*240）

3） 幀率（fps），即每秒鐘視頻刷新的畫(huà)面數(shù)量。一般電影在25fps，即每秒鐘有25 張膠片上的畫(huà)面被投影在銀幕上，由于人眼的視覺(jué)效果，看到的就是流暢的畫(huà)面。如果低于

15fps，就會(huì)感覺(jué)到明顯的停頓現(xiàn)象。

4） 清晰度（definition），顧名思義，就是畫(huà)面的實(shí)際效果、圖像質(zhì)量。越清晰的視頻保留了越多原始的圖像數(shù)據(jù)，能夠更加真實(shí)的還原畫(huà)面。

5） 碼率（bit-rate），即每秒鐘的圖像數(shù)據(jù)量（bps）。碼率越低占用網(wǎng)絡(luò)的帶寬就越小，占用的存儲(chǔ)空間也越少。碼率和上述性能指標(biāo)都是成正比的，即越高的分辨率、幀率、清晰度，最終的碼率就越大。

 

對(duì)于多媒體產(chǎn)品開(kāi)發(fā)，首先需要明確的就是對(duì)于以上幾項(xiàng)主要性能規(guī)格的要求，以此決定處理器的選型。 

  

3目前主流的多媒體處理器 

 

  

4常見(jiàn)的多媒體應(yīng)用及相關(guān)技術(shù)、處理器選型參考

  

 

現(xiàn)階段的視頻、多媒體應(yīng)用已經(jīng)不僅僅局限于基本的視頻壓縮/解壓的功能。面向不同的行業(yè)應(yīng)用，一些特定的需求、附加的功能對(duì)多媒體處理器提出了更高的要求，這既是挑戰(zhàn)也是機(jī)遇。 

  

5典型視頻應(yīng)用系統(tǒng)結(jié)構(gòu)

  

  

具體的功能需求往往直接體現(xiàn)到對(duì)接口的要求，盡量選擇內(nèi)部集成相應(yīng)接口資源的處理器，減少需要外擴(kuò)的器件及電路，以此降低成本。