TW200814786A - Method and apparatus for encoder assisted post-processing - Google Patents

Description

200814786 九、發明說明： 【發明所屬之技術領域】 本申請案大體而言係針對多媒體資料處理，且更特定而 “糸針對使用後解碼器處理技術來編碼視訊。 【先前技術】

U :將高解析度多媒體資料傳輸至顯示設備(例如，蜂巢 以洁、電腦及PDA之顯示設傷）存在不斷增長的需求。 =地檢視某些多媒體資料(例如，體育、視訊、電視 兴播饋入及其他此等影像）而需要高解析度（一術語，本文 中用以指示查看鞏歧 Μ 一 η二斤要的、、、田卽及特徵所需之解析度）。 =高^斤度多媒體資料通常需要增加發送至顯示設傷的 貝=之里’此為需要較多通信資源及傳輸頻寬之—過程。 ^間可調性為用以增強解析度之典型方法，其中高解析 又貝汛（特定言之，高頻率資料）經編碼及 輸至較低解析度資料之一A磔厚^ 曰強層傳 ' 基礎層。然而，空間可調性效率 ^ ’因為此等資料具有雜訊狀統計特徵且具有較差編碼效 二另外，空間可調性係高限制性的，因為提昇取樣解析 度在創建/編碼增強層時已預先判定。因此，需要其他方 =克服空間可調性及此項技術中已知之其他解析度 万法之不足。 【發明内容】 態樣，該等態 不限制此揭示 的特徵。在考 本文中描述之每一裝置及方法均具有若干 樣中並無單一者完全負責其理想的屬性。在 案之範疇的情況下，現將簡要討論其較突出 123045.doc 200814786 ::此討論後’且特定言之’在閱讀了題為，，實施方式”之 早節後’吾人將理解此揭示宰之特柯担 木之特Uk供對多媒體資料處 理裝置及方法之改良的方式。 在一態樣中，處理多媒體資料之方法 胃寸十之方法包括：識別-後處 技術之一指示符；編碼第一多媒_ 夕媒版貝枓以形成第—經編 碼-貝料；處理該第一經編碼資料以形成第二多媒體資料， 遠處理包含藉由應用由該指示符識別之該後處理技術來解 Ο u 碼該第-經編碼資料；將該第二多媒體資料與該第_ 體育料比較以判定比較資訊；及基於差異資訊產生第二妳 編碼資料。比較以判定比較資訊可包括判定指示： 媒體資料與該第一多媒體資料之間的差異之差異資訊。： 第一多媒體資料編碼可包括降低取樣及壓縮該第一多媒體 資料以形成該第一經編碼資料。 丑 可使用各種後處理技術，例如包括提昇取樣、應用一雜

訊減少技術以減少該第二多媒體資料中之雜訊，及康用L 強調弟一多媒體影像之至少一特徵的增強技術。該增強技 術可包括應用-包含增強對應於該第一多媒體影像中之皮 膚特徵之皮膚資訊的增強技術。該方法可進—步包含㈣

第二經編碼資料及該第—經編碼資料傳輸至（例如）一终端Z 機設備。該方法可進一步包含嗲 斤 s便用忒第一經編碼資料解碼 該弟'經編碼資料。解碼該第-經編碼資料以形成一第二 多媒體影像可包括使用直方圖等化、使料緣增強技術及—/

或使用視訊復原。可表丨t M 7 J判疋關於各種規模之資料的差里資 訊’包括藉由-區塊、—巨集區塊或者有助於此方法:特 I23045.doc 200814786 疋實施例之另一大小的資料。該差異資訊包含低解析度編 碼貝料中之現有資訊之一組關係；此組關係可包含··等 式、包括量化殘差係數之數量及位置之決策邏輯，及/或 包含模糊邏輯規則之決策邏輯。 Ο ί； 在另一實施例中，一種用於處理多媒體資料之系統包 括·一編碼器，其經組態以識別一後處理技術之—指示 符，且進一步經組態以編碼第一多媒體資料從而形成第一 經編碼資料；一第一解碼器，其經組態以處理該第—經編 碼資料從而形成第二多媒體資料，該處理包含解碼該第— 經編碼資料及應用由該指示符識別之該後處理技術；及— 比車乂器’其經組恶以判定比較資訊，該編碼器進—步經組 悲以基於差異資訊產生第二經編碼資料，#中該第二經編 碼資料隨後用於解碼該第一經編碼資料。該比較資訊可包 含指示該第一多媒體資料與該第二多媒體資料之間的差： 之差異資訊。該編碼器可經組態以藉由降低取樣該第―； 媒體資料及I缩該所得之經降低取樣的f料來編碼該第— 經編碼資料。該第一解碼器組態可包括：―提昇取樣過程 及-解壓縮㈣’用以產生經編碼之影像；及資料儲存裳 置’用以維持用於形成第二多媒體影像之解碼技術之—扑 示符。該後處理技術進—步包含一雜訊滤波模組，其經： 態以減少該第二多媒體資料中之雜訊。在-些實施例中， 吕亥後處理技術包含一強兮月兮链-夕h 一 強凋，亥苐一多媒體資料之特徵的增強 技術。 在另“e例中’ 一種用於處理多媒體資料之系統包 123045.doc 200814786 括：用於識別一後處理技術之一才旨示符之構用於編碼 第一多媒體資料以形成第一經編碼資料之構件；用於處理 該第一經編碼資料以形成第二多媒體資料之構件，該處理 包含解碼該第一經編碼資料及應用由該指示符識別之該後 處理技術；用於將該第二多媒體資料與該第一多媒體資料 比較以判定比較資訊之構件；及用於基於該比較資訊產生 第二經編碼資料之構件。

C 在另一貫施例中，一種機器可讀媒體包含用於處理多媒 體資料之指令’當執行時，該等指令使—機器識別一後處 理技術之一指示符；編碼第一多媒體資料以形成第一經編 碼資料；處_帛一經編碼資料以形成第2多媒體資料， 該處理包含解碼該第一經編碼資料及應用由該指示符識別 之該後處理技術；將該第二多媒體資料與該第一多媒體資 資訊產生第二經編碼 料比較以判定比較資訊；及基於差異 資料。

在另一實施例中 一種用於處理多媒體資料之系統包括 一終端機設備，其經組態以接收第一經編碼多媒體資料， 該第-經編碼多媒體係產生自第一多媒體資料，該終端機 設備進-步經組態吨收第三經編碼資料1第二經編碼 資料包含表示第-多#體資料之像素與第二多媒體資料之 對應像素之間的差異之資訊’其中該第二多媒體資料係藉 由編碼該第一多媒體資料及接著使用 一亦用於該終端機設 的第一多媒體資 其經組態以解碼 備之解碼器中之後處理技術解碼該經編石馬 料來形成，該終端機設備包含一解碼器， 123045.doc 200814786 ::弟：，編碼資料’及使用來自該經解碼的第二經編碼資 二之貝讯解碼該第一經編碼資料。 在另一實施例中，一種處理多媒體資料之方法，該方法 包括.在一終端機設備中接收第一經編碼多媒體，該第— ===係產生自第一多媒體資料;在該終端機設備 第一經編碼資料，該第二經編碼資料包含表示藉由 比較第-多媒冑資料與第二多媒體資料而產生的差異之資 訊，藉由編碼該第一多媒體資料及接著使用一亦用ς該二 端機》又備之解碼裔中之後處理技術解碼該經編碼的第一多 媒體資料來形成該第二多媒體；解碼該第二經編碼資料二 產生差異資訊；及使用該差異資訊解碼該第—經編碼資 料。 【實施方式】 在以下描述中，給出具體細節以提供對所描述之態樣的 徹底理解。然巾，-般熟習此項技術者應理解，可在無此 等具體細節之情況下實踐該等態樣。舉例而言，可以:塊 圖展示電路，以便不會因為不必要的細節而使該等態樣難 懂。在其他情況中，可不詳細地展示熟知之電路、結構及 技術以便不會使該等態樣難懂。 本文中對”―態樣”、”一些態樣"或"某些態樣"及使用術 語”實施例"或”多個實施例”之類似短語的提及意謂結合態 樣所描述之一特定特徵、結構或特性中之一或多者可包括 於至少-態樣中。在本說明書中各處出現之此等短語未必 皆指同-態樣亦非為與其他態樣相互排斥的單獨或替代態 123045.doc -10- 200814786 2。此外，描述了可藉由-些態樣且非藉由其他態樣加以 展現之各種特徵。類似地，描述了可 其他態樣之要求料種要求。 …一怒樣而非 如本文中所使用之”多媒體資料"或僅”多媒 Ο ϋ ::資=視_(其可包括音訊資料)、音訊資料: ^貝科及音訊資料兩者，且亦可包括圖形資料。如本文 中所：用之”視訊資料，，或，，視訊”為一廣義術語，其 本文身訊或影像資訊及/或音訊f料的影像之序列。 :了：所要的高解析度多媒體資料提供至一或多個顯示 ::技彳:間：Γ及提昇取樣演算法通常包括影像或邊緣 4 =，该專技術使用邊㈣測接著使用線性或適應性 (有夺為非線性m波過程。然而，經由具有高百分比置信 ==專機制無法谓測在一編碼器處在屢縮及降低取樣期 關鍵及細微細節邊緣’或者在解碼及提昇取樣期 有效地再創建關鍵及細微細節邊緣。本文中描述之 方法及糸統之某些特徵包括用以識別關於歸因於i縮而丟 失的多媒體資料之細節的資訊之過程。其他特徵關於藉由 資訊在經解碼的多媒體資料中復原此等細節。進一 步關於圖!至圖7描述及說明此處引入的此等系統及方法。 :了：讀實施例中，為了有助於編碼多媒體資料之過 ^ 扁馬方法可使用關於後處理或解碼過程（例如，在 員丁。又備冑）之資訊來編碼多媒冑資料以考i由一特定的 編碼及/或解碼過程（例如，在編碼器中實施之降低取樣及/ 或在解碼器中實施之提昇取樣演算法)產生的資料差異 123045.doc II - 200814786 性。 在-貫例中’多媒體資料首先經編碼（例如，降低取樣 及壓縮），以形成隨後將被傳輸至至少一顯示設備之壓縮 資料。使用已知的解碼器解碼及提昇取樣演算法來解壓缩 . a提昇取樣經編碼資料之一複本’且將所得資料與原始接 收（未壓縮）之多媒體資料進行比較。將原始多媒體資料與 解壓縮後的經提昇取樣之資料之間的差異表示為”差里資 〇 訊”。併入於後處理技術(例如，降低取樣及提昇爾波 器）中之增強過程可移除雜訊、增強特徵（例如，皮膚:面 部特徵、指示，，快速移動，，物件的資料中之快 小在所產生的差異資訊中之烟值。將差異資訊編碼= 助貝成。辅助資tfL亦被傳輸至解碼器，在解碼器處其用 以:曾強在編碼期間可能已經降級之經解碼影像之細節。可 接著將增強的影像呈現於一顯示設備上。 圖1為用於傳遞串流或其他類型之多媒體資料之通信系 、 ^之方塊^ °此技術可應用於數位傳輸設施12中，數位 2輸設㈣將數㈣料媒體賴傳輸至衫 源^杳接收之夕媒體資料可為數位視訊 源，例如，數位電覜饋入或經數位化之類比〜 源。視訊源在傳輸設施12中經處理且調變=比 在-網路14上傳輪至一或多個終端機16。 /用於 網路14可為適合於傳輸資料之 路，包括乙太網路、電話(例如，。0TS^^ 纖糸統及/或無線系統中之-或多者，其中無線系統包 123045.doc -12- 200814786 含下列系統中之一或多者：分碼多重存取（CDMa或 CDMA2000)通信系統、分頻多重存取（fdma)系統、正交 /刀頻多重（OFDM)存取系統、諸如GSM/GpRS(整合封包無 線電服務）/EDGE(增強型資料GSM環境）之分時多重存取 (TDMA)系統、TETRA(陸上中繼式無線電）行動電話系 統、寬頻分碼多重存取（WCDMA)系統、高資料速率 (lxEV-DO或lxEV-DO金牌多播）系統、IEEE 8〇2 u系統、 MediaFLO™系統、DMB系統或DVB_H系統。舉例而言， 忒網路可為蜂巢式電話網路、諸如網際網路之全球電腦通 k網路、廣域網路、都會區域網路、區域網路及衛星網 路’以及此等及其他類型網路的部分或組合。 自網路14接收經編碼的多媒體資料之每一終端機16可為 任一類型之通信設備，包括（但不限於）無線電話、個人數 位助理（PDA)、個人電腦、電視、視訊轉換器、桌面型、 膝上型或掌上型電腦、（PDA)、視訊/影像儲存設備（諸如 磁帶錄影機（VCR)、數位錄放影機（DVR)等）以及此等及其 他設備之部分或組合。 圖2為說明用於編碼多媒體之數位傳輸設施12中的通信 系統之特定組件之方塊圖。傳輸設施12包括一多媒體源 26，s亥多媒體源26經組態以基於其例如自一儲存設備接收 或能夠存取之多媒體，而將多媒體資料提供至編碼設傷 2〇。編碼設備2〇(至少部分地）基於關於一解碼演算法之資 訊來編碼多媒體資料，該解碼演算法隨後用於或可用於諸 如終端機16之下游接收設備中。 123045.doc -13- 200814786 編碼設備20包括_用#紙z臣夕# 2 肖於、·扁碼多媒體資料之第-編碼器 弟一、為碼器21將經編碼之多媒 25，用減H貝糾供至通信模組 用於傳輸至終端機16中之一或多者。第 蔣細始* r昆-欠丨丨 、’屏馬裔2 1亦 =碼-貝料之一複本提供至一解碼器22。解碼器22經组 '肩碼經編碼的資料及應用較佳地亦在-接收設備中用 於解碼過程中之德声g 4士 & 備中用 中之後處理技術。解碼㈣將 供至一比較器23。 枓^

-指示符經識別以供解碼器22使用，該指示符指示後處 理技術。如在前述句子中使用之”經識別，，指解碼器維持、 :存、選擇或能夠存取指示符。在—些實施例中，該指示 付可維持或儲存於解碼器22之—記憶體設備中，或維持或 儲存於與解碼器22通信之另—設備中。在—些實施例中， 該指示符可選自複數個指示符，每—指示符指示—後處理 技術。在-些實施例中’在不知曉接收設備中之解码器使 用之具體處理技術之情況下’解碼器22亦可使用其他已知 或典型的處理技術。 解碼器22可經組態以執行一或多種後處理技術。在一些 貫施例中，解碼器22經組態以基於一指示使用哪一技術之 輸入來使用複數種後處理技術中之一者。通常，由於在用 於編碼多媒體資料之第一編碼器2丨中使用的壓縮及降低取 樣過程，及在用於解碼多媒體資料之解碼器22中使用的解 壓縮及提昇取樣過程，致使經解碼的資料將可能與原始多 媒體資料至少有些不同（且自原始多媒體資料降級）。比較 裔23經組態以接收及比較原始多媒體資料與經解碼的多媒 123045.doc -14- 200814786 體資料，且判定比較資戒。卜卜& :欠> 、口 較負汛可包括藉由比較原始 多媒體資料與經解碼的多媒體資料而判定之任何資訊。在 些““列中’比較資料包含兩個資料集中之差異且被稱 作’’差異資訊”。舉例而言，可基於逐個訊框來產生差異資 訊。亦可基於逐個區塊來進行比較。本文中所涉及之區塊 可自一像素（⑻）之-"區塊"變化至Μχν任意大小之像素之 一 ’’區塊”。區塊之形狀未必為正方形。 Ο ^差夕異^訊”表示歸詩編碼/解碼過程而在終端機16處顯 不的多媒體資料中看 提…組 級。比較器23將比較資訊 :、/ —、，為碼器24。在第二編碼器24中編碼比較資訊， 且將經編碼的，，辅助資訊"提供至 可蔣白入π仏 ^ 1口桓、、且25。通信模組25

了將…編碼多媒體及經編碼輔助資訊之資㈣傳輸至 終端機设備1 6(圖1)。終端機+ 、 J 資訊"添加增強（例如之解石馬器使用，，辅助 影響或降級 "、’、田即）至在編碼或解碼期間受到 ^ 、、，坐解碼的多媒體資料。此择弓余了拉^ 碼多媒體資料之影像品質，且使得可將經編 影像呈現於顯亍讯傷μ备 #乂呵解析度解碼 心及第二編碼器24實施為單一編碼器。將弟-編碼 後處理技術可包含增強多媒 如，皮膚及面部特徵)之一或 、：。之某些特徵(例 資訊傳輪至接收設備中 ' 何。將級編碼的差異 七芟 接收設備使用辅助資訊將έ #、 碼影像’以補償在編碼及解碼期間受到二即添 即。因此’可將較高解析戶及…一又到衫響之細 收設備上。 或較南品質影像呈現於接 123045.doc -J5- 200814786 將差異資訊識別為φ i ”、 要厶、、扁碼之位元流中之輔助資訊。 使用者資料或，，填料⑽er)”封包可用以使經編碼資料之大

t適合於經編瑪媒體資料的傳輸協定封包大小(例如，IP 資料報或MTU)之大小α私、、，λ 一 。、 輸达輔助資訊。在一些實施例 可將差…貝σ孔硪別為低解析度經編碼資料中現有資訊 之組關係（例如，等式、決策邏輯、量化殘差係數之數 及位置^糊邏輯規則），且可將對此等關係之一索引 Ο 編碼為輔助資訊。由於卄 、並非所有差異資訊皆必須加以編碼 且:將此資訊之格式簡化為關係的查詢表之索引’所以編 馬益輔助提升取樣元資料更有效率地編碼，且使用接收設 備中之資訊以減小需要被傳輸的資訊之烟值。 亦預料到所描述的編碼設備2〇之其他組態。舉例而言， 圖3說明使用一編碼器31替代兩個編碼器（如圖2中所示）的 編碼設備3 0之一替抑杳# Α丨.t . "— 弋貫鈿例。在此貫施例中，比較器23將 I異貝讯提供至單—編碼器31用於編碼。編碼器”將經編 碼的多媒體資料（例如，第_經編碼請）及經編碼的輔助 貝讯（例如，第二經編碼資料）提供至通信模組25用於傳輸 至終端機16。 圖4為說明圖2及圖3 φ#仏 中所不之糸統的一部分（特定而言係 編=器以、解碼器40及比較器23)之一實例之方塊圖。解 碼益40經組態用於解碼經編碼的多媒體資料及應用在接收 終：機16(圖丨)中使用之後處理技術。可將解碼器40之功能 =於本文中為述之編碼器中，例如’圖2及圖3中說明 ^ 解碼态22自編碼器2 1接收經編碼的多媒體資 J23045.doc 200814786 解碼益40中之解碼器模組 料，且將姐解碑眘斗… 胖’、工、·扁碼的多媒體資 、、工解馬貝枓鈇供至解碼器40中之後處理模 =中’後處理模組包括一雜訊議波器(二 、、且42及—資料增強器模組43。 、 - 通常假定視訊序列中之雜訊為加成性白高斯。缺而，視 訊信號在時間及空間上均高 • 3同度相關。因此，藉由在時間上 及空間上使用其白度，可自一 ^ 』目彳5唬σ卩分移除雜訊。在一些 D 〇例中，雜δί1抑制滤波11模組42包括時間雜訊抑㈣ 波，例如，卡爾曼（Kalman)渡波器。雜訊抑制遽波器模組 42可包括其他雜訊抑制廣 ㈣濾波方法，例如，小波收縮濾波器 及/或小波維納（Wiener)濾'波器。小波為用以使一給定信號 在空間域及比例域兩者中局部化之一類功能。小波之美礎b 理念在於分析不同標度或解析度下之信號，使得小波二、卞 之小幅改變產生原始信號之對應的小幅改變。亦可將小波 ㈣或小波維納渡波器應用為雜訊抑制濾波器42。小波收 、縮雜訊抑制滤波可涉及小t變換域中之收縮，且通常包含 三個步驟：線性正向小波變換、非線性收縮雜訊抑制= 及線性反向小波變換。維納渡波器為mse最佳化線性渡波 器’其可用以改良因加成性雜訊及模糊而降級之影像。在 一些態樣中，雜訊抑制濾波濾波器係基於（4,2)雙正交三 次B樣條小波濾波器之一態樣。 一 雜訊抑制濾波器模組42將經雜訊抑制渡波的解碼資料提 供至-資料增強器模組4 3。資料增強器模組4 3可經組態以 增強被認為係檢視（例如）皮膚、面部特徵及快速改變資料 123045.doc -17- 200814786 (例如’用於與體育事件相關聯之多媒體資料冰需要❹ 科之某些特徵。資料增強器模組之主要功能在於在資料之 回放或消耗期間提供影像或視訊增強。典型的影像增強包 括銳^、色域/飽和度/色調改良、對比度改良、直方圖等 &及高頻增強。關於增強皮膚特徵，存在若干膚色偵測方 法。一旦識別了影像中且有膚色 、、 • 、 , 一邑之£域，則可修改對應於 此區域之色度为里以改良色調，從而適合所要的調色板。 〇 •關於改良面部特徵，若在面部特徵中伯測到振鈴雜訊 (rmgmg noise) ’例如經由膚色偵測加以識別，則可應用去 振鈴（de-ringing)渡波器及/或適當的平滑/雜訊減少遽波器 以使此等假影最小化且執行上下文/内容選擇性影像增 強。視訊增強包括閃燦減少、訊框率提高等。在視訊中之 4上土送平均冗度之一指示符可幫助關於閃爍減少 之解碼器/後解碼器/後處理。閃燦常由崎化造成，此得 到，原始存在的具有相同發光條件/亮度之彼等訊框上平 (; 肖亮度位準有波動的重建構之視訊。閃爍減少通常涉及鄰 近訊框之平均亮度（例如，DC直方圖）的計算，及在所討論 . 巾之訊框上應用m皮器以使每-訊框之平均亮度返 回至所計算的平均亮度。在此情況下，差異資訊可為待應 用於每一訊框之經預計算之平均亮度偏移量。資料增強器 模組43將經增強的解碼多媒體f料提供至—比較器^。 圖5為說明具有—經組態用於編碼多媒體資料之處理器 5 1的編碼設備50之一實例之方塊圖。編碼設備50可實施於 傳輸4中’例如，數位傳輸設施12(圖〇。、編碼設備^包 123045.doc 200814786 括一儲存媒體58，其經組態與處理器51通信且經組態與通 信模組59通信。在一些實施例中，處理器51經組態而以與 圖2中說明之編碼器2〇類似的方式來編碼多媒體資料。處 理器5 1使用第一編碼器模組52編碼接收的多媒體資料。接 • 著使用解碼器模組53解碼經編碼的多媒體資料，解碼器模 組53經組態以使用實施於一終端機16(圖1)中之至少一後處 理技術來解碼多媒體資料。處理器5丨使用雜訊抑制濾波器 〇 模組55移除經解碼的多媒體資料中之雜訊。處理器51可包 括資料增強器模組56，其經組態以增強經解碼的多媒體資 料用於諸如面部特徵或皮膚之預定特徵。 由一比較器模組54來判定經解碼的（且經增強的）多媒體 資料與原始多媒體資料之間的差異，t亥比較器模組54產生 表示、、二解碼的多媒體資料與原始多媒體資料之間的差異之 差異資訊。由第二編碼器57編碼經增強的差異資訊。第二 編碼裔57產生提供至通信模組59之經編碼輔助資訊。經編 Ο 馬勺夕媒體資料亦被提供至通信模組59。經編碼的多媒體 資料及輔助資訊兩者皆可被傳送至顯示設備（例如，圖i中 • 之終端機16)，顯示設備使用輔助資訊解碼多媒體資料以 產生增強的多媒體資料。 圖6為次明具有一經組態用於編碼多媒體資料之處理器 61的編碼设備60之另一實施例之方塊圖。&實施例可類似 2圖5來編碼多媒體資料，除了處理器“含有編碼多媒體 資料及差異 > 讯兩者之一編碼器62之外。經編碼的多媒體 貝料及辅助貧訊接著由通信模組59傳送至顯示設備（例 123045.doc 19 200814786 如，圖！中之終端機16)。顯示設備中之一解碼器接著使用 輔助育訊解碼多媒體資料以產生增強的解析度資料且顯示 此資料。 ^不 下文列出可實施於一解碼器中的某些後處理技術之實 m，對此等實例之描述並不意謂將揭示内容限制二 . 僅彼等描述之技術。如上所述，解碼器22可實施眾多後處 理技術中之任一纟|識別ϋ資訊及產±肖應的辅助資 广. 訊。 〇 色度處理 後處理技術之一實例為色度處理，其涉及關於待顯示的 多媒體資料之色度的操作。色彩空間轉換為此一實例。典 型的壓縮操作（解碼、解塊等）及一些後處理操作（例如，獨 立於色度來修改由亮度或γ分量表示之強度的功能，諸 如，直方圖等化）發生於YCbCr或YUV域或色彩空間中，而 顯不裔通常在RGB色彩空間中操作。在後處理器及顯示處 C) 理杰中執行色彩空間轉換以解決此差異。若維持相同的位 元深度’則RGB與YCC/YUV之間的資料轉換可導致資料 壓縮’因為當將R、G及B中的強度資訊變換為γ分量時， 其冗餘減少，此引起源信號之相當大的壓縮。因此，任一 基於後處理之壓縮將潛在地在YCC/YUV域中操作。 色度次取樣係關於對於亮度（之數量表示）比對色彩（表示 的數量）實施較多解析度之實踐。其用於許多視訊編碼方 案（類比及數位）中及亦用於JPEG編碼中。在色度次取樣 中，亮度及色度分量經形成為伽瑪校正（三色激勵）r，G，B， 123045.doc -20- 200814786 分量之加權和，％非& tlw _ 而非線性（三色激勵）RGB分量之加權和。 :、=次=方案表達為三部分比(例如，，但有時 二二:：(例如，4:2:2:4)。四個部分為(按其各別次 弟°P刀冗度水平取樣參考（最初，在NTSC電視系統中 為3.579 MHz之倍數）；第二部分Cb及Cr(色度）水平因 對於第一數位）；盥篦-赵你+ 卞U于（相 Ο Ο 。及Cr經垂直地2:1次取樣)之第三部分；及若存在二 度數位相同之第四部分(指示α ”鍵(key)"分量)。後處理技 術可包括色度提昇取樣（例如，將4:2:〇資料轉換為m資 料）或降低取樣（例如，狀4:4資料轉換為4:2:()資料卜通 常對4:2:0視訊執行低至中等位元速率壓縮。若源多媒體資 料具有比4:2:0高的色訊（例如，4:4:4或4:2:2)，則在後處理 操作期間可將其降低取樣至4:2:〇、編碼、傳輸、解碼及接 著提昇取樣回至原始色訊。在顯示設備處，當變換為咖 用於顯示時，將色訊復原至其完整的4:4:4比。可藉由此等 後處理操作來組態解碼器22以重複可能發生於下㈣示設 備處之解碼/處理操作。 圖形操作 關於圖形處理之後處理技術亦可實施於解碼器“中。一 些顯示設備包括圖形處理器，例&，支援多媒體及H 3D遊戲之顯示設備。圖形處理器之功能性可包括像素處理 刼作’其中之一些（或全部）操作可合適地應用m文良視訊 品質或潛在地併入於包括壓縮/解壓縮之視訊處理中。 α混合 123045.doc •21 - 200814786 Ο u α混合為通常用於兩個場景之間的轉變中或用於在一 Gm上的現有營幕上視訊之重疊中的操作，其為亦可實施 於解碼器22中之像素操作後處理技術之一實例。在以混八 中，色碼中之α值範圍為其中〇 〇表示完全^ = 色彩，而1.0表示完全不透明色彩。為了 "混合"，將自—圖 片緩衝器讀取之像素乘上—，，α,，。將自—顯示緩衝器讀二 之像素乘上一〉咸α。冑兩者加在且顯示結果。視訊内 容含有各種形式的轉變效應，包括：自/至黑色或其他均 勾/怪定色彩之淡化轉變（fade transiti〇n)、兩個場景之間的 交叉淡化（cross fade)及内容之類型之間的接合點（例如， 動晝至商業視訊等）β h.264標準具有使用用於轉變之訊框 數目或POC(圖片序列號）傳送罐及用於開始及停止點之指 不符的規定。亦可指定用於轉變的均勻色彩。 轉變區域可能難以編碼，因為其並非突然的場景改變， 其中可將新場景之開始（第一訊框）編碼為工訊框，及將^後 的訊框編碼為預測訊框。歸因於通常用於解碼器中之運動 評估/補償技術之.性質，可循軌運動作為資料塊，且值定 的亮度偏移量被吸收至殘差内（加權預測可在一定程度上 解決此問題）m化具有較大的問題，因為下 經循軌的運動之改變並非真實運動，而係自一麥：：另一 影像之逐漸切換’此導致大的殘差。在量化（低位元率之 進程）後的此等大的殘差莫絲女指纟 殘差導致大規杈運動及區塊假影 叫⑽1〜0]目對於誘發區塊假影之情況，對於類 似或較佳的感知/視覺品質’編碼界定轉變區域之完整的 123045.doc -22· 200814786 〜像且私夂一幻昆合組態以影響淡化/交叉淡化將引起轉變 之無假影回。放及壓縮效心比率之改良或位元率之減小。 扁馬°°處知曉解碼器之》混合能力可有助於將轉變效 應編碼為元資料而非經由習知編碼將位元消耗在大的殘差 • 上π除了 α值之外，此等元資料之一些實例亦包括對在解 • 碼杰/後處理器處支援的一組轉變效應（諸如，放縮、旋 轉、漸隱及淡化）之索引。 _ 透明度 〇 反 ”透明度’’為可包括於編碼設備20之解碼器22中之另一相 對簡單的後處理像素操作。在透明度過程中，自顯示緩衝 器讀取一像素值，且自圖片緩衝器讀取另一像素值（待顯 示之。孔框）。若自圖片緩衝器讀取之值匹配透明度值，則 將自顯示緩衝器讀取之值寫入顯示器。否則，將自圖片緩 衝器讀取之值寫入顯示器。 視訊按比例縮放（χ2、/2、/4、任意比例） Ο 視σ孔知7比例放（”放大（uPscaling)，，或，，縮減 (d〇Wnscaling)”）之意圖通常為在將一信號格式或解析度下 傳達之資訊遷移至另一不同信號格式或解析度的同時，保 持同樣的原始信號資訊及品質。其在二（2)或四（4)倍之縮 . 減下工作，且經由像素值之簡單平均化加以執行。放大涉 及内插濾波器且可在兩個轴上進行。對γ值執行雙三次内 插，且對色度值執行最近相鄰濾波。 舉例而言，可藉由以下等式來計算Y之内插值： 123045.doc -23- 200814786

對於一列中之每一

白為、’隹的，其中係數僅視縮放比率而定。在一實例 中’ 8位兀足以編碼係數來保證影像品質。僅需將所有的 二次内插方案展示極小的可視 較銳利的影像。必須建置_較 三次内插。所有的雙三次濾波 係數編碼為不帶正負號的 號。對於雙三次内插，係 的，且藉由電路可能難以編碼正負 係數之正負號始終為。 圖8展示對於一給定按比例縮放因子的濾波器之各種選 擇圖8中列出之按比例縮放因子為在行動設備中最常遇 到的按比例縮放因子之實例。對於每一按比例縮放因子， 〇 可基於偵測到的邊緣之類型及所要的滾降（roll off)特徵來 選擇濾波器之不同相位。對於某些構造及邊緣區域，一些 • 濾波益比其他濾波器良好地工作。基於實驗結果及視覺估 計得出濾波器抽頭（filter tap)。在一些實施例中，在接收 器（解碼器/顯示器驅動器）處的一適度複雜的按比例縮放器 可基於區塊/發光方塊（tile)適應性地在濾波器之間選擇。 意識到接收器之按比例縮放器中之特徵的編碼器可指示 (基於與原始之比較）對於每一區塊選擇濾波器中之哪一者 (例如，提供對濾波器之一表格的索引）。此方法可為對解 123045.doc -24- 200814786 出決策之替代。其使 因為其並不必須執行 ’消耗許多處理器循 Γ器經由邊緣侦測對適當的遽波器作 處理循環及解碼器中之功率最小化， 與邊緣損測相關聯之決策邏輯(例如 環之修剪及定向操作）。 伽瑪校正 用以❸％及解㈣非線性、伽瑪編碼或通常簡稱的伽瑪為 ::及：碼視訊或靜態影像系統中之亮度或三色激勵 另一/^⑨▲作之名稱，且其亦為可在解碼H 22 t實施的 另一後處理技術。伽瑪校 、 、总火』 3仪正乙制衫像之整體光亮度。未經 適畜校^之影像可能看起來變白了或者太暗。試圖準確地 再現色杉亦需要對伽瑪校正有些瞭解。變化伽瑪校正之量 :僅改變光亮度，，亦改變紅對綠對藍之比率。在最簡單的 情況下，伽瑪校正由以下幂定律表達式定義·· m 等式3 其中輸入及輸出值為非負實值，通常處於諸如〇至1之預定 範圍内。通常將γ<ι情況叫作伽瑪壓縮，及將γ>1叫作伽瑪 擴展。在解碼器後處理包括伽瑪校正之實施例中，可在解 碼器22中實施對應的伽瑪後處理技術。通常，在Lcd面板 内之類比域中進行伽瑪校正。通常，在伽瑪校正後遞色 (dithering)，但在一些情況下，首先執行遞色。 直方圖等化 直方圖等化為使用像素值之直方圖修改一影像中的像素 之動態範圍之方法。通常，一影像中之資訊並非均勻地分 123045.doc -25- 200814786 布於可能的值範圍上。可藉由繪圖示出像素之數 每一像素之亮度（例如，對於八位元單色&德 ⑸Κχ軸）的關係以形成—影像直 ^ ^自0至 素強度頻率分布。影像直方圖展示—影像之此像 度位準界限内之像素的數目之圖形表亍：各種先壳 影像亦具有低對比度，且二二二有小的動態範圍之 且具有大的動態範圍之 Ο υ 比度。使用映射操作(例如，直方圖等化、對比度J 另一重映射操作)可改變影像之動態範圍。當 t之動態範圍時，可使用較少的位元表示(及編 ”、、）斤付之平坦化（flattened)"影像。 二^像素強度乾圍（例如，像素光亮度值之範圍）執行動 悲：圍調整。雖然通常對整個影像執行，但亦可對一影像 之-部分（例如，表示該影像之一部分的經識別之像辛強 度耽圍）進行動態範圍調整。在一些實施例中，一影像可 ^兩個或兩個以上識別部分（例如，由不同影像主體物 内容、空間位置或由—影像直方圖之不同部分而經區別 開），且可單獨地調整每一部分之動態範圍。 直方圖等化可用以增加影像之局部對比度，尤其當影像 之可用資料由精密的對比度值表示時。經由此調整，可將 強度車乂佳地分布於直方圖上。此允許較低局部對比度之區 域獲得較高的對比度，而不影像整體對比度。藉由有效地 展開像素強度值，直方圖等化將實現此情形。該方法可用 於具有皆為亮或皆為暗之背景與前景之影像中。 123045.doc -26- 200814786 雖然直方圖等化改良對比度，但其亦降低了影像之壓縮 效率 〇 在—此 Ο 一二編碼方法中，在編碼前可使用直方圖等化特 °以大體改良壓縮效率。在反向直方圖等化方法 映射像素光壳度值以減小對比度；所得之影像直方 圖具有較小的(壓縮的)動態範圍。在此方法之-些實施例 可在、、扁碼影像前得出每一影像之直方圖。多媒體之影 像中的像素之亮度範圍可經按比例縮放，以有效地將影像 圖[%至較窄範圍之亮度值。因此，可減小影像之對 比度。當壓縮此影像時，因於低/小範圍的亮度值，編 碼效率比無直方圖壓縮之情況下要高。當在-終端機設備 處解碼該影像時，在該終端機設備上執行的直方圖等化方 :?/像之對比度復原至原始分布。在一些實施例中，編 碼益可維持（或接收）識別用於終端機設備處之解碼器中的 直方圖等化演算法之指示符。在此情況下，編碼器可使用 直：圖等化演算法之反向以改良屢縮效率，且接著將足夠 的貧訊提供至解碼器用於對比度之復原。 圖11說明一編碼設備1120之-實施例，其可在編碼多媒 體貝抖之前減小多媒體資料之動態範圍以便使用較少位元 來編碼多媒體資料。在圖11中，多媒體源1126將多婢體資 料提供至編碼設備㈣。編碼設備崎括-預處理； U 18 :其接收多媒體資料且減小該多媒體資料中所含的至 =衫像之動態範圍。所得之資料”塵、缩”減小了多媒體資 料之大小且相應地減少了需要加以編碼之 _= 量。將所得之資料提供至編碼器1121。 W科之 123045.doc -27- 200814786 編碼器1121編碼經調整的 提供至-通信模組1125， 二且將經編碼的資料 端機設備16(例如，一手機）輪至如圖1中說明之一終 態範圍調整相關聯之資訊提供至;^!=列中’亦將與動 維持於編碼設備1121中作為指料1 ^將該貧訊 改之指示符。若裎#像素強度靶圍進行的修 指示符)，則二。:動態範圍調整相關聯之㈣ 1扁碼益1121亦可編碼此 Ο Ο 信模組⑽，用於傳輸至終 [Μ至通 Λ C βε ^又備1 6 〇隨後’終端機設 備16在顯示影像前重映 鳊栻 些實施例中，諸如32,绝 像之動態範圍。在一 執行… 器21之一編碼器可經組態以 執仃此預處理動態範圍調整。此徐 編碼實施例（包括本文中例如例中，除了其他 w此 圖至圖9所描述之編碼 Λ J)之外，可執行預處理動態範圍調整。 圖9中說明用以指.定將在解碼器處執行的 Γ及其參數之元資料（或指示符）。對按比例縮放之選項 '，、、圖9中描述之用於内㈣波器之不同組的係數。功能指 ^符為在圖9中說明的表格之第2行中列出之—組後處理功 能之索引。編碼器可自此組選擇產生待加以編碼的差異資 訊之最小熵值之功能（基於一區塊）。視情況，選擇標準亦 可為最高品質’品質係經由—些目標構件（諸如，p崎、 SSIM、PQR等）加以量測。另外，對於每一指定的功能， 基於用於此功能之方法提供一組選項。舉例而言，使用邊 緣偵測方法（例如，一組S〇bel濾波器或者3><3或5><5高斯遮 罩），接著使用高頻增強，邊緣增強可發生於迴路外。在 123045.doc • 28 - 200814786 -些貫施例中，使用迴路内解塊器電路，邊緣增 於迴路内。在後者情況下，在迴路内解塊期間使用之邊緣 偵測方法用以識別邊緣，且對由解塊濾波器進行的常規低 通;慮波之補充功能將為—銳化濾波器用以增強邊緣。類似 地直，圖等化具有選項以在全部範圍之強度值或部分強 度值上荨化，且伽瑪校正具有用於遞色之選項。

圖7 5兒明猎由編碼結構（諸如，編碼設備20(圖2)、編碼設 備3^0(圖3)、編碼設備4〇(圖4)及編碼設備圖5))編碼多媒 體貝料之過程70之一實例。在狀態71處，該過程維持一後 處理技術之指示符。舉例而言 該後處理技術可用於一顯 厂、備（例如、、冬、機1 6(圖1))之解碼器中。元資料亦可在 不〃體知曉在接收顯示設備處執行何後處理技術（若有）之 情況下指示一熟知或普遍之處理技術。在狀態72處，接收 的第一多媒體資料首先經編碼以形成第一經編碼多媒體資 料。 在狀態73處’藉由解碼第一經編碼多媒體資料及應用一 由指不符識別之後處理技術，過程7〇產生第二多媒體資 料。該後處理技術可為本文中描述之後處理技術中之一者 或另外的後處理技術。在狀態74處，過程7〇將第二多媒體 育料與第一多媒體資料比較以判定比較資訊。該比較資訊 可為指示該第二多媒體資料與該第一多媒體資料之間的差 異之差異資訊。在狀態75處，過程70接著編碼該比較資訊 以形成輔助資訊（第二經編碼資料）。隨後可將輔助資訊及 經編碼的多媒體資料傳送至一顯示設備，該顯示設備可使 123045.doc •29- 1000可識別或判定彼影像之像素強度範圍。若多媒體資料 包含一連串影像（例如，視訊），則可識別該等影像中之一 或多者之像素強度範圍。舉例而言，像素強度範圍可為含 有90%(或者，例如，95%或99%)之亮度值之影像中的像素

Ο 200814786 用該輔助資訊解碼多媒體資料。 圖1〇為說明藉由在編碼多媒體資料前減小該多媒體資料 之至少一部分的像素亮度強度範圍來編碼多媒體資料（諸 如，由圖π之編碼器112〇執行）之過程1000的流程圖。在 狀態1005處，過程1000識別多媒體資料中之像素亮度強度 範圍。舉例而言，若該多媒體資料包含一影像，則過程 之免度值的範圍。在—些實施例中，若—影像序列中之影 像類似，則可識別該影像序財之所有（或至少許多）料 之相同的像素強度範圍。在—些實施例巾，可識別及平均 兩個或兩個以上影像之像素亮度強度範圍。 在狀態1010處，過程1000修改多媒體資料之一部分以減 小像素亮度強度範圍。通常，—影像之像素亮度值华中於 可利用的強度範圍之-部分上。減小（或重映射）像素值以 覆盍較小的範圍可大大地減少影像中之資料量，其有助於 較有效率的資料編碼及傳輸。減小像素亮度強度範圍之實 例包括”反向”直方圖等化、伽瑪校正或將來自”全部，，範圍 =如:對於八位元影像為0至255)之亮度值重映射至原始 強度犯圍之僅一部分之一減小的範圍。 在狀態1 01 5處 成經編碼資料。 ，過程1000編碼經修 可將經編碼資料傳輸 改的多媒體資料以形 至解碼經編碼資料之 123045.doc -30- 200814786 夕媒2 X備16(圖υ。終端機設備中之解碼器執行用於擴展 … 強度祀圍之過程。舉例而言，在-些實施例 :解碼器執行直方圖等化、伽瑪校正或另一影像重映射 戶:：’以擴展在一像素強度範圍上多媒體資料之像素值。 :之擴展的多媒體資料可能看起來類似於其原始外觀， Ο Ο 5此Ϊ少令人愉快地在終端機設備之—顯示器上檢視。在 -些貫施例中，一指示強度範圍減小之指示符可經產生、 編碼及傳輸至終端機設備。終端機設備中之解碼器可使用 該指示符作為歸解碼接收的多«資料之輔助資訊。 應=意’可將該等態樣描述為—描繪為流程圖、流程框 圖、結構圖或方塊圖之過鞀 耘雖然流程圖可將該等操作描 述為-連續過程，但可並行或同時執行許多該等操作。另 二可重排列該等操作之次序。當—過程之操作完成時， 、’Ή過程。-過程可對應於—方法、—函式、—程序 -副常式、-副程式等。當一過程對應於一函式時；其終 止對應於該函式返回至呼叫函式或主函式。 熟習此項技術者亦應瞭解’在不影響設備之操作之情況 下’可重新配置本文中揭示之設備的一或多個元件。：似 地，在不影響設備之操作之情況下，可組合本文中揭示之 设備的-或多個元件。—般熟習此項技術者應理解，可使 用各種不同科技及技術中的任—者來表示資訊及信號。一 般熟習此項技術者應進一步瞭解，可將結合本文中揭示之 實例所描述的各種說明性邏輯區塊、模組及演算法步2實 施為電子硬體、款體、電腦軟體、令間軟體、微碼❹ I23045.doc 200814786 合。為了清楚說明硬髀另私ω t 件、E堍…及权體之此互換性’各種說明性組 £塊核組、電路及步驟上文已大體根據其功能性而 力:以了描述：將此功能性實施為硬體或軟體視特定應二 整個m的設計約束而定。熟習此項技術者可針 十母一特定應用以不同方式實施所描述的功能性 將此等實施決第醢摆& ” Α +應 離。 績釋以丨起對所揭示之方法之範_的脫 Ο ϋ ::本文中揭示之實例所描述之方法或演算法的步驟可 :現於硬體中、由一處理器所執行的軟體 體、職記《ΕΡ=:. 7於副記憶體、快閃記憶 咖_己憶體、EEPR0M記憶體、暫存 。碟、可移磁碟、CD_ROM，或此項技術中已知之任 存!體中。將一例示性儲存媒體轉接至處 传μ处理益可自該儲存媒體讀取資訊， rr存媒體。在替代例中，儲存媒體可整合至該:理 I益及儲存媒體可駐留於一特殊應用積體電路 (C)中。該ASIC可駐留於一無線數據機中。在替代例 2 Μ儲存媒體可作為離散組件而駐留於無線數據 卢可藉由經設計以執行本文中所描述之功能的通用 :了、數位信號處理器(DSP)、特殊應用積體電路 s =場可程式化閑陣列（FPGA)或其他可程式化邏輯設 月閘或電晶體邏輯、離散硬體組件或其任何组入， 來實施或執行結合本文中所揭示之實例而描述的各㈣明 123045.doc -32- 200814786 性邏輯區塊、組件、模組及 叮 ^ m用處理為可為一微處 理ι§，但在替代例中，該處 命」与任一習知處理器、控 制器、微控制器或狀態機。亦 址u 〜摘*亦可將—處理器實施為計算設 備的-組合'例如’一Dsp與一微處理器之組合、複數個 微處理器、-或多個微處理器結合—⑽核或者任一 此組態。 ^ 所揭示之實例的先前描述經摞 k、工徒供以使任何一般熟習此項 Ο Ο 技術者能夠製造或使用揭示方 又·万居及裝置。對此等實例之 各種修改對於熟習此項技術者將 、 一 只仪仉有將易於顯而易見，且在不脫 離所揭示之方法及裝置之精神，範藏 月竹八乾可的情況下，可將本文 中界定之原理應用於其他實例或可添加額外的元件。該等 恶樣之描述意欲為說明性的，且不限制申請專利範圍之範 疇。 【圖式簡單說明】 圖1為說明用於傳遞多媒體之通信系統之方塊圖。 圖2為說明用於編碼多媒體之通信系統的特定組件之方 塊圖。 圖3為說明用於編碼多媒體之通信系統的特m牛之另 一實施例之方塊圖。 圖4為說明用於編碼多媒體的特定組件之另一實施例之 方塊圖。 圖5為說明具有一經組態用於編碼多媒體資料之處理器 的編碼設備之方塊圖。 圖6為說明具有一經組態用於編碼多媒體資料之處理器 123045.doc -33- 200814786 的編碼設備之另一實施例之方塊圖。 Θ 7為兒明編碼多媒體資料之過程之流程圖。 固8為δ兒明内插濾波器係數因子之實例之表格。 圖9為說明用以指定將在一解碼器處執行的後處理操作 之類型及其參數之指示符之表格。 ^圖1 〇為說明藉由重映射多媒體資料之至少一部分的像素 亮度值來編碼多媒體資料之過程之流程圖。 Ο =1為具有一經組態以在編碼前修改多媒體資料之預處 理裔的編碼設備之方塊圖。 【主要元件符號說明】 Ο 10 通信系統 12 數位傳輸設施 14 網路 16 顯示設備/終端 18 資料 20 編碼設備/編碼 21 第一編碼器 22 解碼器 23 比較器 24 弟—編石馬器 25 通信模組 26 多媒體源 30 編碼設備 31 編碼器 機/終端機設備/接收終端機 器 123045.doc -34- 200814786 40 解碼器/編碼設備 41 解碼器模組 42 雜訊抑制滤波為核組 43 資料增強器模組 50 編碼設備 51 處理器 52 第一編碼器模組 53 解碼器模組 54 比較器模組 55 雜訊抑制濾波器模組 56 資料增強器模組 57 第二編碼器 58 儲存媒體 59 通信模組 60 編碼設備 61 處理器 62 編碼器 70 過程 1000 過程 1118 預處理器 1120 編碼設備/編碼 1121 編碼設備/編碼 1125 通信模組 1126 多媒體源 123045.doc -35-

Claims (1)

1. 200814786 十、申請專利範圍： 1· 一種處理多媒體資料之方法，該方法包含： 識別一後處理技術之一指示符； 編碼第一多媒體資料以形成第一經編碼資料； 處理該第一經編碼資料以形成第二多媒體資料，該處 理包含藉由應用由該指示符識別之該後處理技術來解碼 該第一經編碼資料； 比較該第二多媒體資料與該第一多媒體資料，以判定 比較資訊；及 基於該比較資訊產生第二經編碼資料。 2·如請求項1之方法，其中該比較以判定比較資訊包含： 判定指示該第二多媒體資料與該第一多媒體資料之間的 差異之差異資訊。 3·如請求項2之方法，其中該第一多媒體資料編碼包含： 降低取樣及壓縮該第一多媒體資料以形成該第一經編石馬 資料。 二、^ 4·如請求項2之方法，其中該後處理技術包含提昇取樣。 5·如請求項2之方法，其中該後處理技術包含··應用一雜 訊減少技術以減少該第二多媒體資料中之雜訊。 6·如請求項2之方法，其中該後處理技術包含：應用一強 调第一多媒體影像之至少一特徵的增強技術。 7·如請求項6之方法，其中應用一增強技術包含：增強對 應於該第一多媒體影像中之皮膚特徵之皮膚資訊。 月求項7之方法，其進一步包含將該第一經編碼資料 123045.doc 200814786 及2弟二經編碼資料傳輸至_終端機設備。 9·如叫求項2之方法，其中解碼該第— 一說一々 、扁馬資料以形屮 弟一多媒體影像包含使用直方圖等 形成 …求項2之方法，其中解碼該編二形成一 夕媒體影像包含：使用邊緣增強。 第一 11 · 士明求項2之方法，其中解碼該編碼資料以 ^ 多媒體影像包含：使用視訊復原。 /第二 〇 12·如請求項2之方法，其中基於一區 訊。 j弋忒差異資 1 3 ·如請求項2之方法 資料中之一組關係 其中該差異資訊包含 低解析度 編碼 14·如請求項13之方法，其中該組關係包含等式。 15 士:求項13之方法，其中該組關係包含決策邏輯，其包 括！化殘差係數之數量及位置。 Ο 月求項13之方法，其中該組關係決策邏輯包含模糊邏 輯規則。 1 7· —種用於處理多媒體資料之系統，其包含： 、、扁碼态’其經組態以識別一後處理技術之一指示 付’且進一步經組態以編碼第一多媒體資料從而形成第 一經編喝資料； 一第一解碼器，其經組態以處理該第一經編碼資料從 而形成第二多媒體資料，該處理包含解碼該第一經編碼 貝料及應用由該指示符識別之該後處理技術；及 一比較器，其經組態以比較該第一多媒體資料與該第 123045.doc 200814786 二多媒體資料從而判定比較資訊； :編碼器進—步經組態以基於該比較 編碼資料。 、二 1 8 ·如請求項j 7糸 禅雕次.......其中該比較資訊包含指示該第一多 炼脰為料盘該繁― ， ,Q , ^ ^ 一夕媒體資料之間的差異之差異資訊。 丄y ·如5月求項17之系 • sm. ^ ^ '、 其中该編碼器經組態以藉由降低取 年策该弟—多據轉次 貝料及壓縮該所得之經降低取樣的資料 〇 纟編碼該第-經編碼資料。 、十 2 0 ·如睛求項1 7系 y '、、、’/、中該第一解碼器組態包含： ㈣提幵取樣過程及-解壓縮過程，用以產生經編碼之 衫1篆，及 貝料儲在_ ¥ __ 、，用以維持用於形成第二多媒體影像之 解碼技術之一指示符。 < 21.如請求項17之 # ^ ^ 糸、、先其中该後處理技術進一步包含一雜 訊濾波模紐，盆^一 ”隹 訊。、、，’八經組態以減少該第二多媒體資料中之雜 C， ° 2 2 ·如請求項17 >、、、、，其中该後處理技術包含一強調 • =多媒體資料之特徵的增強技術。 23.t請求項22之系統，其進一步包含-通信模組，其經％ =該第'，編碼資料及該第二經編碼資料資訊傳輪 : 解馬為，該第二解碼器使用輔助資訊解碼該塗 一細:編碼資料。 24· 一種用於處理多媒體資料之系統，其包含： ;°线別—後處理技術之一指示符之構件； 123045.doc 200814786 用於編碼弟一多媒體資料以形成第一經編碼資料之構 件； 用於處理该弟一經編碼資料以形成第二多媒體資料之 構件，該處理包含解碼該第一經編碼資料及應用由該指 示符識別之該後處理技術； 用於比較該第二多媒體資料與該第一多媒體資料以判 定比較資訊之構件；及

   U 用於基於差異資訊產生第二經編碼資料之構件。 2 5 ·如請求項24之系統，其中該比較構件判定包含指示該第 一多媒體資料與該第一多媒體資料之間的差異之差異資 訊之比較資訊。 26·如請求項25之系統，其中該編碼構件包含一編碼器。 27·如請求項25之系統，其中該解碼構件包含一解碼哭。 28.如請求項25之系統，其中該比較構件包含—比較器模 組，其經組態以㈣該第-多媒體資料與該第二多媒體 資料之間的差異資訊。 29. ，其包含儲存於其 或多個機器上， 一種機器可讀媒體 等指令可執行於一 含： 上之指令，其中該 且其中該等指令包 才曰示符之指令； 用於識別一後處理技術 用於編碼第一多媒體資料以形点 风弟一經編碼資料之指 令； 用於處理該第一經編碼資料以 M形成弟二多媒體資料之 指令，該處理包含解碼該第—經編 :山 貝枓及應用由忒扣 123045.doc 200814786 示符識別之該後處理技術； 用於比較該第二多媒體資料與該第一多媒體資料以判 定比較資訊之指令；及 用於基於差異資訊產生第二經編碼資料之指令。 3 0.如請求項29之機器可讀媒體，其中該比較資訊包含指示 該第二多媒體資料與該第一多媒體資料之間的差異之差 異資訊。

   一裡用於處理多媒體資料之系統，其包含： 一終端機設備，其經組態以接收第一經編碼多媒體資 料，該第一經編碼多媒體係產生自第一多媒體資料，1 終端機設備進一步經組態以接收第二經編碼資料，1 ^ 二經編碼資料包含表示該第一多媒體資料與 夕弟 資料之間的差異之資訊二夕媒體 編碼該第一多媒體資…：：〜媒體貧料係藉由 . 、貝枓及接者使用一後處理技術解該 d編碼的第一多拔獅次丛丨+ 解瑪。。' _少媒體-貝料來形成’該終端機設備包含- ”、、為’其經組態以組一 自 解馬違弟二經編碼資料，及使用來 自5亥經解碼的第一奴 資料。 一、、二、為碼為料之資訊解碼該第一經編碼 v 吻乃潦包含· 在一終端機設備中接收 · 魄版夕 关收弟一經編碼多婼體，該第一 〇 係產生自第—多媒體資料； °亥終端機設備中接 _ 碼資料包含f弟一經編碼資料，該第二經 表不稭由比 ―產生的〜訊，籍 體資料而產生的差显+·一夕媒體資料與第二夕 々一 多媒體 123045.doc 200814786 料及接著使用一亦用於該終端機設備之解碼器中之後處 理技術解碼該經編碼的第一多媒體資料來形成該第二多 媒體； 解碼該第二經編碼資料以產生該差異資訊；及 使用該差異資訊解碼該第一經編碼資料。 Γ 123045.doc