從非常簡單的消費(fèi)類音/視頻播放器到在專業(yè)制作環(huán)境中使用的高度復(fù)雜的音視頻捕捉、編輯和回放系統(tǒng)，多媒體設(shè)備或系統(tǒng)的應(yīng)用范圍非常廣泛。人們在實(shí)現(xiàn)這類應(yīng)用系統(tǒng)時(shí)會使用特殊應(yīng)用標(biāo)準(zhǔn)產(chǎn)品(assp)、專用數(shù)字信號處理器(dsp)、rsic處理器和可編程邏輯等多種類型的技術(shù)。這些技術(shù)有各自的獨(dú)特優(yōu)勢和局限性。

　　可編程邏輯的好處是靈活性高，易于擴(kuò)展，可以采用可重配置技術(shù)進(jìn)行多媒體信號處理。由可編程邏輯構(gòu)成的典型模塊有乘法器、存儲器、協(xié)議接口和時(shí)鐘電路(如pll)。這些模塊具有可擴(kuò)展性，能夠適應(yīng)從簡單到復(fù)雜的各種多媒體處理系統(tǒng)。把繁重的計(jì)算工作交給fpga協(xié)處理器，由一個(gè)dsp器件和一個(gè)fpga(而不是多達(dá)8-10個(gè)dsp器件)構(gòu)成的fpga高清方案具有更高的性價(jià)比。

視頻和嵌入式dsp模塊

　　創(chuàng)新的消費(fèi)類需求，如1080p高清電視、多媒體家庭網(wǎng)關(guān)、高帶寬效率的機(jī)頂盒解碼器，一直在推動(dòng)視頻和圖像處理應(yīng)用快速向前發(fā)展。低成本fpga(如cyclone iii系列)的優(yōu)點(diǎn)是能以asic的價(jià)格提供dsp性能、高度靈活性和更快的上市速度。cyclone iii系列中成本最低的是ep3c5器件，它擁有的嵌入式乘法器和邏輯資源足以在hdtv 1080p視頻應(yīng)用中完成實(shí)時(shí)7x7像素濾波功能。面向更高端產(chǎn)品的stratix iii fpga中所包含的dsp模塊可以提供600mhz以上性能的18x18乘法器。stratix iii dsp模塊還能以9x9、36x36和新的12x12模式支持可變比特寬度。該dsp模塊可以為每個(gè)18x18乘法器提供兩個(gè)9x9或一個(gè)半12x12乘法器。如圖1所示，級聯(lián)模式可以把一個(gè)dsp模塊的輸入傳送到下一級，進(jìn)而實(shí)現(xiàn)更為卓越的整體性能。stratix iii fpga的邏輯和存儲器結(jié)構(gòu)還針對dsp應(yīng)用進(jìn)行了優(yōu)化，可以用mlab模塊構(gòu)成抽頭延遲線，用alm(自適應(yīng)邏輯模塊)中的快速3輸入加法器構(gòu)成高效快速的加法器樹。

圖1：采用級聯(lián)模式的stratix iii dsp模塊。

　　隨著圖像捕捉、顯示器分辯率、高級壓縮技術(shù)和視頻智能方面不斷取得重大進(jìn)展，視頻應(yīng)用所要求的處理帶寬也在不斷增長。而標(biāo)準(zhǔn)的快速變化和更高的分辨率也促使設(shè)計(jì)者遠(yuǎn)離現(xiàn)成技術(shù)。用可編程邏輯實(shí)現(xiàn)的模塊化可編程視頻和圖像處理方案具有性能高、靈活、升級方便、開發(fā)成本低等優(yōu)點(diǎn)，當(dāng)產(chǎn)品成熟和生產(chǎn)批量攀升時(shí)，可編程邏輯還可提供轉(zhuǎn)移到更低成本的途徑。

　　fpga內(nèi)部的嵌入式數(shù)字信號處理知識產(chǎn)權(quán)(ip)可以作為單獨(dú)的系統(tǒng)方案，也可以與標(biāo)準(zhǔn)的數(shù)字信號處理器一起作為協(xié)處理器使用。與標(biāo)準(zhǔn)的數(shù)字信號處理器相比，fpga的主要優(yōu)點(diǎn)是內(nèi)建有高水平的并行處理機(jī)制，如圖2所示。而專用的risc處理器無法滿足許多視頻和成像應(yīng)用的所有處理要求。

圖2：dsp和fpga并行處理方案的對比。

　　由于可以把繁重的計(jì)算任務(wù)交給fpga協(xié)處理器來完成，fpga方案改善了性價(jià)比，見圖3。例如，同使用多達(dá)8個(gè)到10個(gè)dsp器件的方案相比，用一個(gè)dsp器件和一個(gè)fpga實(shí)現(xiàn)的高清方案成本效益更高。assp無力支持快速改變和不斷發(fā)展的視頻和成像標(biāo)準(zhǔn)。由于可以方便地通過升級來支持更高的分辨率和最新引入的視頻標(biāo)準(zhǔn)，fpga可以用作視頻方案的通用平臺。

圖3：dsp與用作協(xié)處理器的fpga一起使用。

　　fpga的可重新編程能力也消除了設(shè)計(jì)過時(shí)的風(fēng)險(xiǎn)。asic需要較長的開發(fā)時(shí)間，基于asic的方案不能像fpga方案那樣方便高效地進(jìn)行修改。fpga縮短了上市時(shí)間，消除了nre(非重復(fù)工程)成本，可以通過實(shí)時(shí)改進(jìn)來支持新興的標(biāo)準(zhǔn)、新的功能要求或?qū)Ω偁幷甙l(fā)布的新功能做出回應(yīng)。

　　一個(gè)常見的設(shè)計(jì)挑戰(zhàn)是視頻分配通道受到帶寬限制。如果利用不同的視頻壓縮算法限制數(shù)字域中的可用帶寬，那么在顯示經(jīng)過解碼的數(shù)據(jù)流時(shí)將有不同的表現(xiàn)方式。如果提高視頻壓縮器的壓縮比，模塊式codec的離散余弦變換將產(chǎn)生馬賽克噪聲或干擾。使用fpga對視頻數(shù)據(jù)實(shí)現(xiàn)預(yù)壓縮和后壓縮可使編碼器更容易實(shí)現(xiàn)視頻壓縮，并可進(jìn)一步改進(jìn)圖像質(zhì)量，降低傳輸帶寬要求。對于有線、衛(wèi)星、電信和iptv廣播業(yè)務(wù)模型來說，由于必須在狹窄的帶寬條件下滿足高質(zhì)量要求，這種功能的意義更為重大。

　　預(yù)處理可在視頻數(shù)據(jù)進(jìn)入編碼器之前用2d濾波平滑掉一些高頻成分，從而降低馬賽克噪聲。2d fir濾波器和中值濾波器功能可以利用3x3、5x5或7x7恒定系數(shù)矩陣提供靈活和高效的2d fir濾波實(shí)現(xiàn)方式。

可編程嵌入式處理器

　　大部分多媒體產(chǎn)品不僅需要進(jìn)行信號處理，而且