- 高清移動多媒體設(shè)計
- 移動高清視頻回放
- 移動高清攝像機
- 多媒體處理器必須具備強大的縮放引擎
- 高效的視頻編碼和圖像信號處理(ISP)
可以設(shè)想一個具有高清視頻質(zhì)量的手機,它能用來觀看電視節(jié)目、視頻短片或電影,記錄生活鏡頭,甚至通過控制臺玩高質(zhì)量的3D游戲,這是多么令人愜意的事??!
而在無線市場中正發(fā)生的戲劇性變化能驅(qū)使設(shè)計師在移動設(shè)備上實現(xiàn)令人稱奇的高清視頻。如今,高分辨率移動顯示器有了巨大的改進,移動存儲的成本正在快速下降,3G網(wǎng)絡支持寬帶下載,低功率媒體處理性能也有了顯著的提高,這些技術(shù)的進步將使下一代精密手機和便攜式媒體產(chǎn)品產(chǎn)生質(zhì)的飛躍。移動視頻市場要想跨越早期的試用階段,設(shè)備制造商必須突破目前的技術(shù)限制以實現(xiàn)高清移動多媒體應用。
未來的手機將能記錄和回放高清視頻,粗顆粒、低分辨率的手機攝像將成為過去。數(shù)碼相機上的先進性能,如自動曝光補償,光學校正,圖像穩(wěn)定,紅眼消除和人臉檢測等,都將被用到手機上以捕獲高質(zhì)量的靜止照片。
而未來手機上的3D游戲性能也將媲美專用的手持式播放器的視頻效果。最終,移動設(shè)備將能播放幾乎所有格式的高清視頻,并通過HDMI接口輸出到高清電視機上?! ?br />
高清消費體驗是未來移動多媒體的關(guān)鍵組成部分,因此也是一個很好的市場機遇。然而,隨著市場機遇給無線多媒體帶來的顯著變化,移動高清的實現(xiàn)也面臨著嚴格的性能、功耗需求所帶來的設(shè)計挑戰(zhàn)。為了應對這個挑戰(zhàn),設(shè)計工程師必須獲取低功率多媒體處理技術(shù),同時采用新的標準,以及充分考慮高清的可能性和挑戰(zhàn)及相關(guān)的處理架構(gòu)。
實現(xiàn)移動高清視頻回放
隨著蜂窩網(wǎng)絡帶寬的提高和WiFi的普及,越來越多的消費者會把視頻下載到他們的手機和移動媒體播放器上?;ヂ?lián)網(wǎng)是今天最主要的視頻來源。2008年1月,僅美國就提供了超過98億個可在線收看的視頻,其中三分之一來自YouTube網(wǎng)站。其他來源包括視頻共享站點、音視頻站點以及提供在線劇情的電視網(wǎng)絡。
對于想在手機上觀看視頻的用戶來說,移動多媒體處理器需要識別和支持多種視頻編碼標準。表1列出了目前在用的各種視頻編解碼器。內(nèi)容兼容性是支持“任何地方,任何內(nèi)容”這個理想目標的關(guān)鍵。為了推進移動視頻的普及,用戶不必知道他們的設(shè)備支持何種格式或分辨率。用戶也許不能在他們的手機上以全高清的分辨率觀看高清編碼的視頻,但他們希望能用手機播放出來,并能輸送到電視機上觀看。
正如表1所示那樣,許多應用都有向H.264視頻標準轉(zhuǎn)變的趨勢,因為H.26?具有很高的編解碼效率。H.264標準具有廣泛的協(xié)議以適用于從低分辨率視頻會議到HDTV等各種類型的應用。為了最大化兼容性,移動設(shè)備應支持H.264基線協(xié)議(Baselineprofile)以及運算能力更強的主要協(xié)議(Mainprofile)和高端協(xié)議(Highprofile),后者使用更高效率的CABAC(內(nèi)容自適應二進制算術(shù)編碼)無損壓縮技術(shù)。H.264高端協(xié)議在指定比特率下可以提供更高的質(zhì)量,是高清藍光盤首選的視頻編解碼標準。
目前,雖然H.264已經(jīng)成為主要的視頻編解碼標準,但隨著技術(shù)的不斷發(fā)展,成功的移動多媒體架構(gòu)還需要支持未來的媒體標準。通過采用一定程度的軟件可編程性,成功的移動多媒體架構(gòu)將支持新特性和新應用的快速集成,并支持不斷演變的音視頻編解碼器。
手機或移動媒體設(shè)備的電池壽命是設(shè)計視頻回放功能的重要考慮因素。從很小的文件中解碼出高質(zhì)量的圖片通常需要很強的處理能力。移動設(shè)備要想支持幾個小時的視頻回放,同時保留足夠的電池使用時間,移動多媒體處理器的視頻解碼功率必須小于200mW,其中包括圖形存儲器在內(nèi)。高功效且解碼720p高清視頻只需160mW的設(shè)備使用900mAH手機電池可以實現(xiàn)6小時的視頻回放。
[page]
考慮到移動視頻回放的各種使用情況,用戶很可能希望同時在手機和電視機上觀看視頻。為了實現(xiàn)這個目標,多媒體處理器必須具備強大的縮放引擎,該引擎能夠在尺寸完全不同的顯示器上同時縮放和顯示圖像。為了高性價比地支持同時在模擬電視和HDTV上進行視頻回放,處理器應采用片上模擬電路來支持復合接口、S端子或HDMI接口。
實現(xiàn)移動高清攝像機
除了解碼高清視頻以便用戶能在手機上回放這些視頻外,未來的無線技術(shù)將能幫助用戶在移動設(shè)備上實現(xiàn)高質(zhì)量高清視頻的記錄。雖然目前有些手機已經(jīng)支持視頻記錄,但采用的是低分辨率的QVGA格式,只能產(chǎn)生粗顆粒、低質(zhì)量的視頻。在手機上播放高清視頻是移動媒體領(lǐng)域中的重大進展,但使用移動設(shè)備記錄遠超QVGA質(zhì)量的高清視頻代表了這一行業(yè)更大的進步。
在考慮用移動設(shè)備記錄高質(zhì)量視頻的要求時,圖像傳感器不是主要因素,而高效的視頻編碼和圖像信號處理(ISP)是最重要的。在移動設(shè)備上編碼視頻所需的處理功率要比解碼相同視頻大得多。
100萬像素圖像傳感器很容易捕獲高清720p圖像產(chǎn)生的921,600個像素,因此主要挑戰(zhàn)不在于傳感器。困難來自于這個事實:這些100萬像素必須以30幀/秒的速度進行記錄,相當于26?Mbps的原始數(shù)據(jù)流。
另外,為了具備高質(zhì)量高清視頻所需的圖像校正、防抖、自動對焦、去噪聲和曝光控制等先進功能,ISP管線必須足夠快地處理這些實時數(shù)據(jù)。采用正確的視頻編碼和ISP架構(gòu),使用H.26高端協(xié)議壓縮,720p的視頻可以從龐大的26?Mbps壓縮到可管理的2-5Mbps,相當于記錄一個小時的視頻內(nèi)容只需2GB。
隨著閃存容量的迅速提高以及價格的迅速下降,未來移動多媒體設(shè)備有望具備16GB以上的內(nèi)容存儲器。從存儲器角度來看,支持長時間高清視頻記錄不成問題,只要高清編碼具有足夠高的功效。
僅僅實現(xiàn)龐大的移動視頻數(shù)據(jù)的管理和壓縮是不夠的,還必須以足夠低的功率來完成,以保證手機電池有足夠的使用時間。采用H.26?高端協(xié)議的視頻編碼具有針對功率優(yōu)化的多媒體架構(gòu),因此完全可以勝任。高質(zhì)量高清記錄(包括圖形存儲器在內(nèi))的處理功率小于450mW時,在使用標配電池的手機上記錄音視頻的時間可以長達數(shù)小時。
在滿足這種處理器功率規(guī)范的條件下,用戶可以在手機上記錄長達3小時的高清視頻。手機提供高清攝像功能將極大地提升用戶生成的內(nèi)容等級,有助于推進移動多媒體應用的普及,進一步擴大基于web的視頻共享應用范圍。
高清已經(jīng)離我們不遠了
現(xiàn)在正是有創(chuàng)新能力的設(shè)計工程師開發(fā)未來移動設(shè)備的合適時機。設(shè)計足夠的處理能力以使手機與其他多媒體設(shè)備能夠播放和記錄高清視頻是一個令人興奮的機遇,同時也是一個艱巨的任務。
Broadcom最近推出的一款多媒體處理器可以讓消費者在手機上記錄與回放高清視頻、捕獲高質(zhì)量照片,同時還能玩3D游戲。這款型號為BCM2727VideoCoreIII的多媒體處理器是該公司首個高能效、大功率多媒體處理器,可以在低功耗條件下用H.26?高端協(xié)議的壓縮技術(shù)提供720p高清編碼和解碼功能,從而實現(xiàn)移動高清應用。
一些領(lǐng)先的手機和便攜式媒體播放器公司正在設(shè)計下一代高清移動設(shè)備。在今后幾年內(nèi),全球手機用戶將能在手機上觀看和記錄高質(zhì)量高清視頻、捕獲高質(zhì)量照片,并同時玩3D游戲。
表1:流行的視頻播放器和相關(guān)編解碼器