摘? 要: 回顧了MPEG的發展歷史,介紹了MPEG-1、MPEG-4和MPEG-7標準的特點,并對MPEG的未來作了展望。?

　　關鍵詞: MPEG? 視頻? 音頻? JPEG ?

?

　　MPEG壓縮技術已是目前視頻壓縮的重要技術之一。它解決了以往硬盤容量有限及計算機總線瓶頸效應,因而擴大了多媒體應用" title="多媒體應用">多媒體應用空間的自由度及靈活度。它開拓了很多不同的數字影像應用,VCD節目制作就是運用了MPEG壓縮技術。VCD盤上存儲的影視圖像和聲音是采用MPEG算法壓縮的數字信息,并按MPEG的格式交錯存放在VCD盤上。在數字多媒體壓縮(特別是視頻壓縮)領域內的國際標準" title="國際標準">國際標準有很多,如ISO/ITU-T(國際標準化組織/國際電信同盟)技術委員會下的JPEG(Joint Photographic Experts Group)標準,CCITT(國際電報電話咨詢委員會)制定的H.261標準等,而著名的MPEG(Moving Pictures Experts Group,運動圖像專家組)是在ISO(國際標準組織)和IEC(國際電工委員會)內運作的一個工作組,它組建于1988年,開始時只有15位專家。?

　　MPEG的任務是開發運動圖像及其聲音的數字編碼標準,專家組最初的任務有三個:實現1.5Mb/s、10Mb/s、40Mb/s的壓縮編碼標準,即MPEG-1、MPEG-2、MPEG-3。但因為MPEG-2的功能已使MPEG-3為多余,所以MPEG-3于1992年撤消。MPEG-4項目是1991年5月建議并于1993年7月確認。到現在為止,MPEG公布的標準有:①MPEG-1標準:1993年8月公布。用于傳輸1.5Mb/s數據傳輸率的數字存儲媒體運動圖像及其伴音的編碼;②MPEG-2標準:1994年11月公布。其全稱為:“運動圖像及其伴音的編碼”,主要針對高清晰度" title="高清晰度">高清晰度電視(HDTV)所需要的視頻及伴音信號,傳輸速率為10Mbps,與MPEG-1兼容,適用于1.5Mbps～60Mbps甚至更高的編碼范圍;③MPEG-4標準:2000年10月公布。該標準的目標為:支持多種多媒體應用(主要側重于多媒體信息內容的訪問),可根據應用的不同要求現場配置解碼器。目前,MPEG將研究重點轉向了交互性更加高級的形式,在未來的幾年里,技術的發展將使這種高級形式成為可能。?

1 MPEG的發展及其特點?

1.1 MPEG-1?

　　在MPEG出現之前,關于圖像壓縮已經有兩個標準,即用于靜態圖像數據壓縮的JPEG和用于電視電話、會議電視圖像壓縮的H.261,但是他們都與計算機數據標準無關。這就要求制定一個圖像、伴音、存儲和傳輸四個方面的計算機系統和廣播電視都統一的標準,從而有利于各種媒體廣泛交流,因此MPEG就應運而生了。?

　　MPEG-1標準完成的基本任務就是質量適當的圖像(包括伴音)數據必須成為計算機數據的一種,和已有的數據(如文字、繪圖等數據)在計算機內兼容,并且這些數據必須在現有的計算機網絡和廣播電視等通信網絡中兼容傳輸。MPEG-1標準有3個組成部分:MPEG視頻、MPEG音頻、MPEG系統。所以MPEG涉及的問題是視頻壓縮、音頻壓縮及多種壓縮數據流的復合和同步問題。MPEG-1標準是適用于傳輸1.5Mbps數據傳輸率的數字存儲媒體運動圖像及其伴音的編碼標準,可以處理各種類型的活動圖像,其基本算法對于壓縮水平方向360個象素、豎直方向288個象素的空間分辨力,每秒24至30幅畫面的運動圖像有很好的效果。與JPEG不同,它沒有定義產生合法數據流所需的詳細算法,而是在編碼器設計中提供了大量的靈活性,另外定義已編碼位流和解碼器的一系列參數都包含在位流本身當中,這些特點允許算法可以用于不同大小和寬高比的圖像,也可以用在工作速率范圍很大的信道和設備上。?

　　MPEG-1標準壓縮首先對色差信號進行亞采樣,減少數據量,采用運動補償技術,減少幀間冗余度,利用二維DCT變換去除空間相關性,對DCT分量進行量化,舍去不重要的信息,將量化后DCT分量按照頻率重新排序,將DCT分量進行變字長編碼,最后對每個數據塊的直流分量(DC)進行預測差分編碼。MPEG視頻的編碼和解碼框圖如圖1所示。

?

?

　　MPEG-1的壓縮目標是先對分辨率為30幀/秒(NTSC制式)或704×576、25幀/秒(PAL制式)的視頻圖像在水平方向和垂直方向上使象素減少一半,即變成352×240(NTSC制式)或352×288(PAL制式)的SIF圖像格式,再對其與立體聲伴音進行壓縮。?

1.2 MPEG-2?

　　MPEG-2標準全稱為“運動圖像及其伴音的編碼”,主要針對高清晰度電視(HDTV)所需要的視頻及伴音信號,傳輸速率為10Mbps。?

　　MPEG-2標準分為八個部分,統稱為ISO/IEC1318國際標準。第一部分:系統,描述多個視頻,音頻和數據基本碼流合成傳輸碼流和節目碼流的方式;第二部分:視頻,描述視頻編碼方法;第三部分:音頻,描述與MPEG-1音頻標準反向兼容的音頻編碼方法;第四部分:符合測試,描述測試一個編碼碼流是否符合MPEG-2標準的第一、二、三部分的軟件實現方法;第五部分:數字存儲媒體-命令與控制,描述交互式多媒體網絡中服務器與用戶間的會話信令集;第六部分:非向后兼容的音頻,規定不與MPEG-1音頻反向兼容的多通道音頻編碼;第七部分:10比特視頻,現已停止;第八部分:實時接口,規定了傳送碼流的實時接口。?

　　MPEG-2視頻編碼標準是一個按等級劃分的系列,按編碼圖像的分辨率分成4個“級”:低級(LL: low level),輸入信號的像素為ITU-R601格式的四分之一;主級(ML: main level),輸入信號的像素為ITU-R601;高級-1440(H14L:high-1440 level)為4:3模式電視高清晰度格式;高級(HL: high level)為16:9模式電視的高清晰度格式。按所使用的編碼工具的集合分成5個“類”:簡單類(SP:simple profile),只有基準幀Ⅰ和預測幀P;主類(MP: main profile),比SP增加了雙向推測幀B;信雜比分層類(SNRP:SNR scalable profile);空間可分層類(SSP: spatial scalable profile);高類(HP: high profile)?！凹墶迸c“類”的若干組合構成MPEG-2視頻編碼標準在某種特定應用下的子集。對某一輸入格式的圖像,采用特定集合的壓縮編碼工具,產生規定速率范圍內的編碼碼流。MPEG-2的編碼碼流分為6個層次。從上至下依次為:視頻序列層(Sequence);圖像組層(GOP:GroupofPicture);圖像層(Picture);像條層(Slice);宏塊層(MacroBlock)和像塊層(Block)。?

　　MPEG-2的編碼流程:在幀內編碼的情況下,編碼圖像僅經過DCT,量化器和比特流編碼器即生成編碼比特流,而不經過預測環處理。DCT直接應用于原始的圖像數據。在幀間編碼的情況下,原始圖像首先與幀存儲器中的預測圖像進行比較,計算出運動矢量,由此運動矢量和參考幀生成原始圖像的預測圖像。而后,將原始圖像與預測像素差值所生成的差分圖像數據進行DCT變換,再經過量化器和比特流編碼器生成輸出的編碼比特流。?

1.3 MPEG-4?

　　MPEG-4標準的目標是:支持多種多媒體應用(主要側重于對多媒體信息內容的訪問),可根據應用的不同要求現場配置解碼器。MPEG-4旨在為視(音)頻數據的通信、存取與管理提供一個靈活的框架與一套開放的編碼工具。?

　　在MPEG-4圖像與視頻標準中,視頻表示工具的目標,是為多媒體環境下的紋理、圖像和視頻數據的有效存儲、傳輸及管理提供標準化的核心技術。尤其強調這些工具對圖像和視頻內容的原子單元(稱為視頻對象VO)的編解碼能力。對任意形狀的視頻對象進行有效的表示,以支持所謂基于內容的功能集。而此功能集支持內容(即場景中的物理對象VO)的單獨編碼和解碼,這一特性為交互性提供了有力的底層機制支持,也為在壓縮域對圖像或視頻的VO內容進行靈活的表示和管理提供了有利條件。MPEG-4圖像與視頻標準統一支持傳統矩形和任意形狀圖像與視頻的編解碼。對于基于內容的應用,輸入的圖像序列可能具有任意形狀和位置。形狀可以用8位透明分量表示(一個VO由多個其它對象構成時)或用一個二值掩模描述。另外,通過對場景中每個物體采用適當的和精細的基于對象的運動預測工具,可以大大提高某些視頻序列的壓縮比" title="壓縮比">壓縮比。對于MPEG-4擴展的基于內容的編碼可視為傳統的VLBV內核或HBV工具由矩形輸入向任意形狀輸入的邏輯延伸。從這個意義上,基于內容的編碼是VLBV和HBV內核的超集。?

　　MPEG-4標準在原有的基礎上增加了七個新的功能。增加的各個功能的特點:?

　　(1)基于內容的操作與比特流編輯支持無需編碼就可進行基于內容的操作與比特流編輯。(2)自然與合成數據混合編碼。提供將自然視頻圖像同合成數據(文本、圖形)有效結合的方式,同時支持交互性操作。(3)增強的時間域隨機存取。MPEG-4將提供有效的隨機存取方式:在有限的時間間隔內,可按幀或任意形狀的對象,對一音、視頻序列進行隨機存取。(4)提高編碼效率。在與現有的或正在形成的標準的可比擬速率上,MPEG-4標準將提供更好的主觀視覺質量的圖像。(5)對多個并發數據流的編碼。MPEG-4將提供對一景物的有效多視角編碼,加上多伴音聲道編碼及有效的視聽同步。在立體視頻應用方面,MPEG-4將利用同一景物的多視點觀察所造成的信息冗余,在足夠的觀察視點條件下有效地描述三維自然景物。(6)錯誤易發環境中的抗錯性“靈活多樣”是指允許采用各種有線網和各種存儲媒體,MPEG-4將提高抗錯誤能力,尤其是在易發生嚴重錯誤的環境下的低比特應用中(移動通信鏈路)。MPEG-4是第一個在其音、視頻表示規范中考慮信道特性的標準,目的不是取代已由通信網提供的錯誤控制技術,而是提供一種對抗殘留錯誤的堅韌性。(7)基于內容的尺度可變性。內容尺度可變性意味著給圖像中的各個對象分配優先級。基于內容的尺度可變性是MPEG-4的核心,因為一旦圖像中所含對象的目錄及相應的優先級確定后,其它的集內容的功能就比較容易實現了。對甚低比特率應用來說,尺度可變形成一個關鍵的因素,因為它提供了自適應可用資源的能力。?

　　以上七個新的功能可以歸納為三類:基于內容的交互性、高壓縮率和靈活多樣的存取模式。前三個功能為基于內容的交互性,四、五為高壓縮率模式,最后兩個為靈活多樣的存取模式。?

1.4 MPEG-7?

　　MPEG-7標準稱為“多媒體內容描述接口”,它將擴展現有內容識別專用解決方案的有限能力,特別是還包括了更多的數據類型。換言之,MPEG-7將規定一個用于描述各種不同類型多媒體信息的描述符" title="描述符">描述符的標準集合。?

　　MPEG-7對定義其它描述符及其結構(描述方案)和他們之間關系的方法進行標準化。這種描述(也就是描述符和描述方案的組合)將與內容本身關聯起來,以便對用戶感興趣的素材進行快速高效的搜索。MPEG-7標準化了一種用來定義描述方案的語言,即描述定義語言(DDL)。加之相關的MPEG-7數據的AV素材,就可以被加上索引,并可進行檢索。?

　　MPEG-7象MPEG家族中其他成員一樣,是針對滿足特定需要的音、視頻信息的標準化表述。MPEG-7的描述符并不依賴于它所描述的內容是編碼的或存儲的方式,可以把MPEG-7的描述說明附加到模擬制的電影里或使用紙張打印出來的圖片上。然而,盡管MPEG-7的描述不依賴于所處理素材的(編碼)表達方式,但由于在一定程度上它是在MPEG-4的基礎上發展起來的,而MPEG-4采用了按照具有一定時間關系和空間關系的對象來進行音、視頻編碼的處理方式,因此用MPEG-4編碼有可能把描述說明附加到場景中的成員(對象)。所以,MPEG-7在描述中要提供不同的程度,才可能實現不同等級的識別。?

　　因為描述性特征必須在應用環境中才有意義,所以會因用戶范圍的不同和應用領域的不同而有所區別。這就意味著,同樣的素材,因為要和應用范圍相匹配,可能會使用不同類型的特征來描述。當然,所有這些描述都會以高效方式進行編碼,業績能提高搜索的效率。同時,中間也可能存在過渡的抽象等級。抽象等級與提取特征的方式有關,許多低等級的特征可以用全自動的方式提取出來,而高等級的特征就需要更多的人工交互。?

2 MPEG的未來展望?

　　MPEG視頻壓縮系統是一個技術含量很高的復雜集成系統,在世界上也只有少數極有實力的公司才能推出商業產品。由于MPEG視頻壓縮系統的技術復雜、設備昂貴,故至今為止普及程度很低。但隨著技術的進步、工藝的成熟和價格下降,其應用面正在拓寬。過去需要花費上百萬元才能做成的事,現在幾萬元即可實現。如果你已有這樣的MPEG視頻壓縮系統,就可以很容易地把錄像、照片、圖片、電影等節目加以壓縮存放在計算機中或制成VCD光盤,可廣泛應用于電話教學、演示宣傳、生活錄像、檔案管理等各類視頻制作中。?

　　MPEG制定的是一系列的標準,實際上很多情況下并沒有給出具體的實現,最后的實施還要通過各個廠商和研發人員實現。MPEG的研究主要集中在兩方面:(1)對MPEG實現的研究;(2)進一步研究圖像壓縮方法已獲得更大數據壓縮比并且實現人機對話的功能。?

　　從現在MPEG標準來看,作者認為主要將集中在基于對象的處理方法上,也就是對于不同的數據、內容、要求將根據情況選擇不同方法處理。首先這是滿足人機對話的最基本要求,也是滿足以人為本宗旨的要求,每一個人都可以根據自己的需求而要求采用不同的處理方法;其次,這是進一步獲得更大圖像數據壓縮比的要求。以前基于數據本身和其變換與統計個性的壓縮方法很難滿足高速公路上的數據流速度,而基于對象的處理方法,主要是現實基于模型的壓縮方法,可以針對不同對象(內容)采用不同的壓縮方法,從而獲得巨大的壓縮比,而且滿足人的視覺要求。在MPEG-4和MPEG-7標準中已經注意到這個問題,引入了基于對象或稱為內容的研究。因此,筆者認為基于對象的圖像處理方法將是未來MPEG的發展方向。?

　　MPEG視頻壓縮技術和VCD制作為我們開拓了一條發展的新路。MPEG視頻壓縮技術的推廣應用,可能會產生一個新行業,即多媒體制作。這方面的市場剛剛啟動,在教育、培訓等方面幾乎是空白,是一個有很大發展潛力的行業,有待于開拓。未來是信息化的社會,各種多媒體數據的傳輸和存儲是信息處理的基本問題,本文僅僅從MPEG標準方面進行了詳細的闡述,還有很多這方面的技術有待于研究和開發,希望有志于此研究的人士共同探討。?

參考文獻?

1 Tan K T.Blockiness detection for MPEG-2 coded video[J].IEEE Signal Processing Letters ,2000,7(8)?

2 Kadono.Motion compensation method for moving prctures with binary shape[J].Signal Processing :Image Communication,2000,16(3)?

3 Sodagar.Multi-scale zerotree entropy coding[C].Proceedings of the IEEE 2000 International Symposium on Circuits and Systems,2000?

4 梨洪松.數字視頻技術及其應用[M].清華大學出版社,1998?

5 Overview of the Mpeg-4Standard[S].version 16,ISO/IEC JTC1/SC29/WG11 N3747,2000?