[go: up one dir, main page]

TWI344791B - A method and apparatus for processing a signal - Google Patents

A method and apparatus for processing a signal Download PDF

Info

Publication number
TWI344791B
TWI344791B TW096125506A TW96125506A TWI344791B TW I344791 B TWI344791 B TW I344791B TW 096125506 A TW096125506 A TW 096125506A TW 96125506 A TW96125506 A TW 96125506A TW I344791 B TWI344791 B TW I344791B
Authority
TW
Taiwan
Prior art keywords
block
information
image
unit
current
Prior art date
Application number
TW096125506A
Other languages
English (en)
Other versions
TW200826683A (en
Inventor
Jeong Hyu Yang
Original Assignee
Lg Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lg Electronics Inc filed Critical Lg Electronics Inc
Publication of TW200826683A publication Critical patent/TW200826683A/zh
Application granted granted Critical
Publication of TWI344791B publication Critical patent/TWI344791B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

1344791 I 99年12月22日替換頁 九、發明說明: —-- 【發明所屬之技術領域】 本發明係關於一種訊號處理方法及其裝置。 【先前技術】 壓縮編碼係為一系列的訊號處理技術,用於經由通訊電路傳 輪數位化的資訊,或者將此數位化資訊儲存為適合儲存媒介的形 式。壓縮編碼的對象有音頻、視訊、字元等。尤其地,在視訊上 完成壓縮編碼的技術被稱為視訊序列壓縮。通常,視訊序列的特 徵在於包含空間冗餘或時間冗餘。此外,還有用於3維 (3-dimensional ; 3D)視訊處理的屬於複數個域之一的多視角視 訊序列,使用至少一或多個照相機為使用者提供多個視角。 【發明内容】 因為多視角視訊序列中的視角之間包含高相關性,所以可透 過複數個視角之間的空間預測除去重疊的資訊。因此,需要各種 壓縮技标以有效地完成複數個視角之間的預測。 如果未充分地除去空間冗餘和時間冗餘,則會降低編石馬訊號 的壓縮比。如果過量地除去空間冗餘和時間冗餘,則無法產生完 成訊號編碼所需要的資訊。從而,重建比會退化。 此外,多視角視訊訊號中,因為中間視角的影像大多數僅僅 是照相機的位置彼此不@,所財間視肖影像的相祕和冗餘非 常高。如果中間視角影像的冗餘未被充分地除去或者過渡地被清 5
的年12月22日替換頁 除’則會降低壓縮比或重建比。 本發明之目的在於提高訊號處理的效率。 本發明之另-目的在於提供—種訊號之編碼資訊之預測方· 法,可有效地處理訊號。 本發明之再一目的在於提供一種運動資訊之預測方法,可有〃 效地編碼視訊訊號。 ^ 在訊號的處理過程中,當時間方向的運動向量被給至當前單; 疋時’本發明可使用時間方向的運動向量預測當前單元的視角方尊 向的運動向1。因為方向的運動向量涉及同—視域不同時 區上的影像’除非每個物件的深度依照時間流逝而變化,大多數 可準確地酬時财向的運動向量。使用與當前單元鄰接的其他 早响編碼資訊預測當群元之編碼資訊,從而可實現更加準確 的酬’降低對制錯誤傳輪數量。因此,可完成高效的編碼。 使用與鄰接單元_方向相關之參考單元則方向之編碼資訊以 預測當前單元之編碼資訊,也可完成高效編碼。 籲 此外,即使當前單元之運動資訊未被傳送,也可計算盘當前 單元之運動資訊非常類似的運動資訊。從而可增加重建比。 - 為了獲得本發明的這些目的和其他優點,現對本發明作具體.· 化和概括性触述,本發騎1·處财法包含以下步驟: 搜索當前區塊之第-域上具有最高相關性之_單元,獲得關聯 單元之編碼資訊’以及使用獲得的編碼f訊預測當前區塊之第二 域之編碼資訊。 99年12月22日替換頁 為了獲得本發明的這些叫其他優點,本發明的一種訊號 “概細下練]_胁當祕㈣塊搜索第一域 次之關聯單元,_聯單元之編碼資訊,以及使用獲得的編碼 貝訊預測當前區塊之第二域之編碼資訊。 ’:了獲仔本&月的&些目的和其他優點,本發賴—種訊號 〜 ^ 3町步驟,触當前區塊之魏省略資訊,擷取當 A束之〇位區塊之運動貢訊,獲得與操取的運動資訊不同的域 ^存在的參考區塊之運動資訊,以及根據獲得的參考區塊之運動 資訊導出當前區塊之運動資訊。 為了獲传本發明的這些目的和其他優點,本發明的一種訊號 處理方法包含以下步驟:獲得第—域上的當前單元與雜單元之 間的運動胃5fl,根顧得的物資訊獲得當前單元巾包含的當前 區塊的對應的_區塊;獲得第二域上的關聯_之運動資訊; 以及使用獲得的第二域的運動資訊導出對應於當前單元的第二域 的運動資訊。 【實施方式】 。、現在結合關之實例對本發明输佳實施方式料細說明。 可0里解的K ’如上所賴本發明之概括說明和隨後所述的本發 月之詳』相均是具有代表性和解釋性的說明,並且是為了進— 步揭示本發明之申請專利範圍。 1J44/91 「mi国 一, 月22曰替換頁 圖」所不係為本發明之視訊訊號解碼—-π參考「第1圖」,解碼器主要包含網路提取層(Ne細rk Abstraction Layer ; NAL)解析單元i 〇〇、信息量解碼單元綱、反 向里y反向轉換單元、内部預測單元、解塊(diking ) ;慮波器單元勝解碼影像緩衝器單元6⑻、#間制單元等。 中間預’則單疋700包含光線補償調整量預測單元710、光線補償單 元720、運動補償單元730等。 網路提取層解析單元100透過網路提取層單元完成解析,以_ 解碼接收的魏序m在赌頭和师料被解碼之前,至 少-或多個序列參數集以及至少—或多㈣像參數集被傳送至解 碼裔。這個例子中,各種組態資訊可被包含於網路提取層標頭區 域或者網路提取層標稱延伸區域中。因為多視角倾編碼 (multi-view video coding ;猜〇係為習知先進視訊編碼技術的 額外技術,多視角視訊編碼流的情況下,增加多種組態資訊比無 條件地增加它們更加有效。例如,用於判定多視角視訊編碼流出鲁 現或未出現的旗標資訊可被增加至網路提取層標頭區域或者網路 提取層標頭的延伸區域。僅僅當輸入的位元流依照旗標資訊對應 / 於夕視角視訊編碼的位元流時,可為多視角視訊增加組態資訊。 例如,組態資訊可包含時間水準資訊、視角水準資訊、中間視角 影像組識別資訊、視角識別資訊等。 解析流透過信息量解碼單元200被信息解碼。然後,操取每 8 1344791 99年12月22日替換頁 一在區塊的係數、運動向量等。反向量化/反向轉換單元3〇〇用 預定的常數乘以接收的量化值而得到產生的變換係數,然後透過 反向變換此係數而重建畫素值。内部預測單元4〇〇使用重建的晝 •素值完成當前影像内的解碼取樣的内部螢幕預測。同時,解塊濾 •,波B單元應用重_晝素值至每_編碼的宏區塊,以減少區 •塊失真。透過平滑區塊的邊緣,濾、波器改善解碼影像的影像品質。 、魯遽'波器程序的選擇取決於邊界強度以及此邊界周圍的影像取樣的 梯度。經顧波的影像被輸出或者儲存於解碼影像緩衝器單元_ 中。 解碼影像緩觸單it 600的角色是儲存或打開之前編碼的影 像以完成中間影像預測。這個例子中,每—f彡像的.frame__ ^ 和影像順序數(picture。也嶋t; P〇c)被聽儲存解碼影像缓 衝器單元_㈣對應影像或者域對應_像。多視角視訊編 碼中,因為部份之前編碼的影像可能與看_當前影像不同,因 此可使用祕識職像視肖之視”訊連同,fr_麵^ /抑 像順序數,從喊用這絲像作為參考雜。㈣酬單元· 可使用以上述方式管理的參考影像。 去_測單元使师爾緩衝ϋ單元_中儲存的來 技像完成巾_像酬。㈣編碼的起塊可_分為宏區塊 /刀區。每—宏區塊分區可從—或兩個參考影像中預測得出。中間 預測單元包含光線補償調整量預測單元爪、 9 ^44791 99年12月22曰替換頁 720以及運動補償單元73〇。 如果輸入的位元流對應於多視角序列,因為從不同的照相機 义別獲得餘個視角相,砂照相機糾部及外㈣素會導致 出現光線鋼。為了防止光線制,錢補償單元,完就線 神償。完成光線補償時’可使賴標資訊,其中旗標資訊指示是 否,成光線補償於視訊訊號之縣層之上。例如,可使顧於指, 不是否完成紐爾於制贼職舰塊之上㈣ * ·. 成光線補償。使賴標資訊完成光線補償時,可細於各種^春. 壤類型(例如,内部16xl6模式、B省略模式、直接模式等)。 運動補償單元730使用信息量解碼單元傳送的資訊補償 當前區塊的運動。運動補償單元?3〇從視訊訊號中操取鄰接於春 前區塊的區塊之運動向量,並且獲得當前區塊的預測運動^ 值。然後’運動補償單元730使用獲得的預測運動向量值以及從 視訊訊號中_的機量向量以補償#前區塊的運動。可使用單 個參考影像或者複數懈彡像完成_運_償。錢純 φ 中’如果當前影像涉及另-制的影像,則可使用解碼影像緩衝 器單元600中儲存的中間視角預測之參考影像列表之資訊完成運_ 動補償。還可使用用於識別對應影像視角之視角資訊完成^動補― 直接預測模式(直接模式)係為一種編碼模式,由一個蝙碼 區塊的運動資訊酬當祕塊的運崎訊。因射節省編码運動 U44791 99年12月22日替換頁 以這種方法改效率。例^· 接拉式使叫間方向的運動資訊相關性預測當前 訊。當糊恤_如雜_,輪雜== ^間直接模式制空間方向的運動資訊相·預測當前區塊的運 動貝況。當物速度在包含_運_相巾變 模式有效。 上間直接
中間預測影像以及内部酬影像依照—種测模式透過以上 程序被選擇以錢當前影像。以下描述將解釋提供高效訊號處理 方法之各種貫施例。 第2圖」卿係為本發明實施例之#前單元之編碼資訊之 預測方法之示意圖。 首先,本發明使用的單元的含義可包含朗至視訊訊號的例 如區塊、子區塊、宏區塊、幀、影像、框、影像組、序列等。因 φ此,單元的含義應該限制為每個應用實例之含義。此外,應用此 單7〇至另一訊號和視訊訊號時,此單元可被限制為適合此對應訊 號的不同含義。 多視角視訊序列中,每個單元可存在於第一或第二域中。例 如,第一域對應時間域,而第二域對應空間域。這個例子中,各 單元可存在於時間方向或空間方向(例如,視角方向等)的轴線 之上。因此’部份單元僅僅可獲得時間方向的預測資訊,或者其 他單元僅僅可獲得空間方向的預測資訊。此外,部份單元可獲得 I344/yi 年12月22曰替換頁 99 年 12 月 22 a ^ 時間方向和㈣杨咖測魏。 況下如果,考單元存在於相同視角的不同時區之上,每〆單元 包含時間方_,動向量。如果參考單元存在於相同時間的不同 ' 〃 I元包含m方向的運動向量。這種向量被稱為 差異向里。以下贿巾,縣向量包対財向運動向量的概念 以及空^向運動向量的概^本發日种,編碼資訊可包含用於 運動向量、參考针、區塊_、預測方向等資訊。 —依,、,、本發明實&例,如料間方向的運動向量被給至當前單 凡①貝使用%間方向的運動向量預測當前單元①的視角方向 的運動向i例如’可從與當前單元①具有最高相祕的單元③ (例如’參考早中找科财向運動向量所指示的單元雜。 這個例子中,如果單元_包含視角扣運動向量,可預 測其為當前單it①的視角方向的運動向量。因為時間方向的運動 向量指_視角的不同輕上的影像,除非物件的距離隨著時間 的抓化很大’大彡時候可準確地酬視肖方向的運動向量。 同樣,如果視角方向的運動向量被給至當前單_,可使用 視角方向的運畅量删當前單元_時間方向的運動向量。例 如’可從與當前單it①具有最高相關性的單_ (例如,參考單 疋)中找到視㈣向運動向量所指示的單元_。這個例子中, 如果單元Μ④包含時間方向的運動向量_④,』,可預測立為备 前單元①的時間方向的運動向量。因為制方向的運動向量指: 12 1344791 99年12月22日替換頁 不同視角的相同時區上的影像,特別物件的時個照相一'''· 機來說幾乎類似。因此,大多時候可準確地預測時間方向的運動 向量。 此外,以上實施例中’如果依照當前單元的區塊類型執行雙 向預測,顯然以上解釋的每個例子均可應用至前向及後向兩個方 向。 以上母個戶'知例中,,運動向置指示的單元(關聯單元③或 關聯單元④)的開始位置可能與用4x4相等地劃分每個單元所屬 之宏區塊而產生的私4區塊的開始位置不一致。如果這樣的話, 找到最接近的4x4區塊然後為此區塊產生運動資訊,或者平均重 疊於關聯單元③或關聯單元④的區塊的運動資訊,以這樣的方式 可預測運動資訊。賊’使用這種方法,可為第—域或第二域上 的每個單元預測運動資訊。 依照本發明另-實施例’可使用與當前粒鄰接的單元的資 訊預測當前單元的運動資訊。 、 例如’假設與當前單元①鄰接的複數個單⑼,兩個鄰接單 元A和B包含時财向的運動向量,單元c包含期方向的運動 ㈣。這個例子中’如果計劃預測當前單元①的時間方向運動向 頁’則鄰接單^和B的時間方向的運動向量可用。如果使用之 前實_之方法,則可鄰接單元c的視衫向勒向量預測 鄰接早^的時間方向的運動向量。使用包含鄰接_。的預測 13 ^4791 99年12月22曰替換頁 時間方向運動向量的三個時間方向運動向量,可預測當前單元① 的時間方向運動向量。因此,應用第—域上的運動向量的相同方 法可應用至第二域。 例如,計劃預測當前單元①的視角方向運動向量的情況下, 可直接地使用鄰接單元c的視角方向運動向量。如果使用之前實 施例之方法’可使㈣接單元A^B的時財向運動向量預測每
-視角方向運動向量。並且可更加準確地預測當前單元①的視角 方向運動向量。 此外,應用以上方法至包含時間方向運動向量和視角方向運 動向里的㈣單7C①的鄰接單元的所有組合,可預測當前單元① 的時間方向運動向量和視角方向運動向量。 應用以上轉的方法+,為了使制作參考單元的每個單 的區塊包含時間方向運動向量和視角方向運動向量,可使用以 方法。赌,將僅僅在時間方向具有預測資訊的單娜命名為
^ τ ’將健在視肖方向具有侧f訊的單讀命名為單元V。 個例子中,單元τ僅僅 僅僅需_方向的運動向量,而單元 編的運動Μ。單7^或單^可能被内 、·扁碼。如果當前區塊在罩 的視角方__^ =部編碼’則可使用鄰接區 同樣,如果角方向運動向量。 早兀丁的當前區塊被内部編碼,則可传用齟i 塊的時間方向運動向量預 /扁竭貝何使用鄰接 、、3方向運動向量。可設定當前區 14 丄 ==運動向量至預測的時間方向運動向 相㈣糊__,綱元了/v,它 =僅為母-區塊包含單個的時間或視角方向運動向量。此外, 動=;"述方故定當前區塊的運動向量至沿參考單元預測的運 門二如果在早70 τ/ν上完成内部編碼,可使用鄰接區塊的時 間方向運_量和視財向運麵量預測當祕塊的運動向量。 於應用内部編碼的單元來說,經由鄰接單元完成預測的 方法可採用三個鄰接單元的中位數或者九個鄰接心*單元的平均 數的方式。 ,照本發明之另—實施例,可制當前單元的運動向量所指 :的鄰近部中的接近單元作為當前單元的關聯單元。這個例子 ’可使用關聯單元和接近單元 確的預測。 、早疋之間的位置差值向量完成更加準 依照運動向量的解析,透過解析1/η畫素(㈣,Μ 8等) 找到初始Μ單元的位置。這_子中,可絲法正確地對映至 ^一化網觀構的單元。即,如果n>1,關聯單元的畫素位於網格 、。構中的早疋的十進伽畫素的位置。依照從關聯單元獲得的資 訊’透過從初簡_解摘域近更大_格結構 =方式’可完賴映。例如’計咖測參考索⑽情況下,關聯 早凡的歸—化哺結構中的W區塊位置可祕配。這個例子中, 對於當前區塊的四個㈣區塊,對映宏區塊的每一㈣區塊的參 15 寸344791 考索=均可使用。可為每—4驾塊產生七^-口為運動資訊由何區塊單元提供,計劃 匹配關聯單元中的歸-化的4χ4網格區塊位置。這個可 獲得對應叫區塊的運動資訊。如果完成關聯單元的歸—化網: Γ:16x16宏區塊位置的對映’可產生對應宏區塊的全部‘ 況。例如,可產生區塊類型、參考索引、運動向量等資1 、 m 方法釋的初始對映位置接近鄰接的歸一化結構的位置之 夕個湖。歸-化結構中,例如晝素規格、4χ4區塊規 目=區塊規格、純區塊規錄結構可考慮在㈣如, 素左上端4素的接近方法,包含當前單元的左上角晝 的初Γ置點。存在-角之上的情況下,可完成-側處 上&晝素的接近。這個例子中,可選擇左上端、右上端、 下端或右下赠的單元。或者,可完成與初始對映位置最接近 下置』的對映。例如,計劃透過8χ8區塊規格完成對映的情況 τ透·轉―8χ8區_左上端晝素位置的距離而完成最 接近位置點的對映。 次依照本發明另—實施例,可使用第-域單元的第二域的編碼 預’則w則單元的第二域的編碼資訊。這個例子中,可一同獲 訊編馬貝轉區塊資訊和運動資訊。預設表格可用於導出編碼資 ^ 省略㈣表示當前單元之前編碼料同單元的資訊被 田月j單元的貝汛。應用省略模式時,可使用不同域上存在的 1344791 次^ 99年12月22日替換頁 _貝訊。下面解釋對應實施例之細節。 一 第一實例,可假設時間Tb處的兩個不同視角序列内的物件 (或背景)之_補運_係保證在足_近的關Te處幾乎 類似。這個例子中,時間Tb處的視角方向編碼資訊和時間Tc處 的視角方向編碼資訊之間存在高程度的地使用相同 視角處不同時區上對應區塊的運動資訊,可獲得較高的編碼效
=。仰職科種方妓否被朗的運動省略資訊。依照運動 名略貧訊’如果勒省略模式被朗,射㈣祕塊的對應區 塊中預測區塊類型、運動向量、參考索引等運動資訊。因此,可 減少編碼運動資訊所需的位元數,如,如果酬iQn _啕為 〇,則運動純賦紐制。如果_1Gn—skipj]ag為丨,則運動 省略模式被顧。勒省略:纽位於_顧。例如,運動省略 資訊位於宏區塊層的擴展區域,以通知是否從解碼器側的位元流 中產生運動資訊。
第二實例’與上面的例子—樣,交換第—與第二域的方式中 y吏用相同的方案。尤其地,時間❿處的視角%内的物件(或 背景)和時間Tb處的視角Vb的鄰接視角Va内的物件 很可能包含彼此類_運動資訊。這個例子中,如果相同時區7上 另-視角的對應區塊的運動資訊被產生以完整地使用,可 高的編碼效率。指示此方案是否被使用的運動省略資訊可用卞。乂 針對以上解釋的兩種運動省略模式,當前單元的關聯單元的 17 1344791 尋找方法可類似地被應用。以下描述中 ^ 命名為中間視角運動省略,而第二實例被命名為日門運 以下解釋倾單元之_私之尋财法y巧動名略。 首先,作為關聯單元,在盘去針s 一 隹’、田則早兀不同的域上存在的單元 2=前單元㈣她置树元。例如,中間視角 = 子中,相同時區上不同視角處存在的位於當前 2置處的區塊可用作關魏塊。時間運動省略模式的例 ’不同時區上相同視角處存在的位於當前區塊的相同位置的 區塊可用作關聯區塊。或者可使用當前區塊的鄰接區塊的運動資 訊找到關觀塊。之前的描财已經加以解釋。耻,—旦找到 關聯區塊,則可個每-關聯區塊的運動資訊預測當前區塊的運 動資訊,果關區塊沒有運動纽,則無法_運動省略模式。 社解釋的關聯單元之尋找紐可完整輯展成為更小或更大的 單元尋找關聯單元之方法。 透過組合上述兩種省略模式方案可得到多種方法之實施例。φ .第-實施例中’可分離地管理旗標以朗兩種_的省略模 式中哪種被使用。例如,中間視角省略模式可表示為-^1^^_111(^〇11_5邮_^眧,時間省略模式可表示為 - temporal_motion_skip一flag ^可使用語法上的兩個旗標位元表示鹿 用出現或未出現。兩種類型的省略模式被應用之後選擇一種較佳 的模式。或者’每幀僅僅可使用兩種省略模式之一。 18 ^/91 ^/91 例如 99年12月22日替換頁 或者,從鄰 縣資訊t制視財向的參考單元之後,如果參考單 間方向的運㈣訊,則時間方向的運動資訊可用。時間 動令略mx触财賴_。g卩, =同時區上不同視角處存在的單元。如果鄰接:: :法献這個條件,則無法應用時間運動省略模式。或者, 接::的運動資訊中找到時間方向的參考單元之後, 果參考早7L包含視角方向的運動資訊,則視角方向的運動資訊 可使用。 另—貫例’賴鮮元狀—個_省略料,然後使用此 •i疋的運動省略模式關子中’可#人指示運動省略模式如何被 #應用的資訊於賴頭中。例如,語法元素.motion sklp e祕厂 可用。如果’ m〇tion_skip_enable、!,則中間視角運動省略模 錢應用。如果n_skip—en義1 〇,則時間運動省略模 式被應用。可透過、otion_skipJ^為每一宏區塊表示運動省 略模式是碰制至職的雜塊。㈣標的位置對應宏區塊層 的延伸區域。 第二實施例中,如果從當前單元之鄰接單元細的參考單元 存在於視角轴之上,則視角運動省略模式。如果預測的參考 19 ί344791 〇β L 9^· 12月22日替換頁 單元存在於時f料之上,則可顧巾間視肖運〜 器-側已知這些。因此’一個/ m〇ti〇n—skipJag 一足夠。這個例 子中,可依照來自鄰接單元的運動資訊之預測方法判定模式。例 如’解碼器側解析motion_skip_flag之後’如果運動省略模式被應. 用,則可從鄰接單元預測運動資訊。如果預測的參考單元係為相 同時區上不同視角處的單元,則可應用時間運動省略模式。如果 h 預測的參考單元係林同_上相同視角齡在的單元,财應· 用中間視角運動省略模式。在空間方向預測模式中採用_方法鲁. 作為運動資訊之獲得方法,從鄰鮮元巾綱_ 參考索引和物向量。 Μ 第三實施例中,僅僅可使用兩種運動省略模式其中之一。這 侧子中’僅僅需要一個^ m〇ti〇n_skip一flag .。例如,應用中= 視角運動模式時’當前單元的鄰接單元應該指不同時區上的相同 視角處的單心如果賴單元任意其—無法滿足這個條件,則無 法應用中間視角運動省略模式。從鄰接單元的運動資訊中找到視# 角方向的參考單元之後’如果參考單元包含時間方向的運動資 訊’則可使科财向的運動資訊。這種转可類似地應用至應/ 用時間運動省略模式的例子中。 “ 、中間視角運動省略模式關子巾,如果_單元的運動資訊 並非視財⑽縣資訊,則無法顧此料法。依照當前單元 與關聯單元之咖關差值或者_單元與_單元^考單元 20 1344791 99年12月22日替換頁 之間的時縣值,使耻例公切㈣運動向 運動省略模式的辭巾,如果關魏塊的運崎訊並料間方向 的運動資訊,則無法躺以上的演算法。或者,依照當前單元斑 ’關聯單元之間或_單元與關聯單元的參考單元之_中間視角 幾何或減麟,㈣關公式可導出運動向量。例如,假設實 ^際的照相機依照V〇、V1和V2的顺序位於直線上。假設當前單元 位於%處。假設關聯單元位於训處。假設關聯單元的參考單元 2 V2處。這個例子中,關聯區塊的運動向量的各分量的大小被 設定為I〆2以使用。如果給出實際照相機之間的距離,考慮實際 距離則可得到運動向量。此外,即使照相機未處於直線上,可使 用幾何或拓撲距離。 透過視角識別資訊可知道視角之間的區別。透過影像順序 數、框數目等可知道時間軸上的單元區別。多視角時序序列中, φ僅僅使用參考索引無法找到不同視角之間的正破單元。如果參考 單元的重新排列程序出現視角之間的不同,一個視角處的參考索 -弓丨指示的單元與不同視角處相同值的參考索引所指示的單元彼此 •之門不對應。例如’如果%和Tb處存在的宏區塊Μ①的參考索 引所“不的單謂應於^和Te處存在的單元③,舰肖%處的 同樣參考索弓丨對應於Va和Ta處存在的單元⑤。因此,產生關聯 單元的運動:貝訊時’至少需要影像順序數、框數目與/或視角識 別身訊其中之一以替代參考索引。透過比較當前單元的參考列表 21 1344791 99 日替換頁 上的參考單元的影像順序數、框數目與/或視角識別資訊至少其 中之一,最終可找到同樣的參考。 、 此外,上述方式導出的運動向量被用作預測值,且找到實巴 的運動向量。因此,對應的差值被編碼以使用。這個例子中,能-夠涉及更加準確的位置。 「第3圖」所示為本發明實施例之運動向量之預測方法。 ' 編碼器使用當前區塊的鄰接區塊的運動資訊預測當前區塊的 , 運動資訊’然後傳送實際運動向量和預測運動向量之間的差值。籲 同樣’解碼器判斷當前宏區塊涉及的影像的參考影像數是否等於 鄰接區塊涉及的影像的參考影像數,然後得到預測的運動向量 值。例如’如果鄰接區塊中存在—㈣塊,包含與當前宏區塊相 同的參考影像數’則實際上鄰接區塊的運動向量被使用。其他例 子中,則使用鄰接區塊的運動向量的中位值。 多視角視訊編碼中,參考影像可存在於視角軸和時間軸之 上。由於這侧徵,如果當前宏區塊的參考f彡絲與鄰接區塊的_ 不同’則對應的運動向量彼此之陳可能不相關。如果這樣的話, 預測的運躺量值醉雜大大麟低^因此,本發明實施例提 出-種新的運動向量制方法,使財間視角__。 -· 例如’視角之間產生的運動向量可能倚賴於物件的深度。如 果序列的深度沒树大的空間變化,並壯果序列的·隨著時 間軸的史化不嚴重,則每_宏區塊的位置處的深度變化也不大。 22 99年12月22曰替換頁 &個例子中’深度表示能夠指示中間視角差異的資訊。此外,因 為全域運動向量的f彡縣本上存在於則目機之間,無論深度如何 略微變化’如果全域向量比深度變化⑽献,則制全域運動 向量比使㈣間方向運動向量可能更加有效。
k個例子+,全域物向量麵可制麟駐預定區域的 運動向量。例如,如果運動向量對應部份區域(例如,宏區塊、 區塊、畫素等),全域運動向量(或全域差異向量)係為與包含部 份區域的整個區域對應的運動向量。例如,整魏域對庫一個單 獨中貞、-個單獨影像或者整個序列。整個區域可能對應—個影像、 一個背景或者默區域_至少—個物件。全域 一個晝素料、W晝素單元,較、8χ8單域者宏= 單元的值。 依照本發明實施例,可使用共㈣塊的中間制運動資訊預 測當前區塊的運動向量。這個例子巾,共健塊表轉在於相同 影像内的當前區塊之鄰接區塊,或者—區塊,包含於不同的影像 中位於與當前區塊的位置相_位置。例如,不同視角處的不同 影像的纽下共㈣塊為空_共位區塊,或者㈣視角的不同 影像的情況下共位區塊為時間的共位區塊。 多視角時序編賴構巾’㈣定的時間間隔僅在視角方向預 測提供的影像的方式中,可實現隨機存取。因此,如果用於預測 運動資訊的兩個影像僅僅在蝴方向被解碼,則可應用新的運動 23 1344791 b 99年12月22曰替換頁 向量預測方法至這兩個影像之間暫時存在的影像。例如,僅僅可 從視角方向預_影像中獲得視角方向的運動向量。獲得的向量 可被儲存為4 4區塊單疋。如果在僅完成視角方向預測的情況下 光線差值比較大’則會頻繁出現内部制編碼。這個例子令,運 動向量可被設定為〇。然而,如果由於光線差別過大頻繁完成内部 預測編碼’則產生很多包含視角方向運動向量之未知資訊的宏區 塊。為I加以補償,内部預測的例子中,可使用鄰接區塊的運動 向里^虛擬斜間現角運動向量。_預騎編碼的區塊的運 動向量可被设疋為虛擬的中間視角的運動向量。 從兩個解衝__咖運峨之後,可編碼兩 個影像之間存在的等級影像B。這_子+,兩個解郷像可能 為固杨像。這個例子t,固定影像表示—個經過編碼的影像, 僅僅涉及相同時區上的框中_。例如,岐影像表示此經過編 碼的影像,涉細視_,较爾偷細。、 = 果鄰接區塊不包含中間視角的運動向量,使用解碼影像中 州、f &區塊財間視角運動向量的平均數,可酬每—分區的 =運動向量。相同的方式可被應用至包含中 :科間^向量的鄰接區塊的例子。例如,可伽公式以公 式2預測當别區塊的運動向量。 [公式1] M if
+气 WUD+W 2mn~~' · 24 1344791 99年12月22日替換頁 [公式2] '
W N '[!]u])+—
2mT 這個例子中’Μ -表示每一分區的水平區塊的大小,N. 表示每-分區的垂直區塊的大小、v(r和,mvl,分別表示解碼影像 中月)向和後向參考影像的運動向量。例如,每和,mv】,表示 固定影像的巾間視鱗動向量或者固定騎的全域運動向量。 鄰接區塊分別包含中間視角參考影像,但是可從預測的中間 視角運動向量的中位數或平均數中得到新預測的運動向量值。 如果在當前區塊之上完成時間方向的預測編碼或者預測内部 編碼,則無法知道當前區塊的中間視角運動資訊。因此,依照本 發明另一實施例,透過以下方法預測中間視角運動向量。 第一方法中,可使用時間或視角方向中當前影像的前參考影 像和後參考影像的共位區塊。例如,4x4區塊的中間視角的運動向 量被平均以使用。 第二方法中,可使用時間方向運動向量所指示的區塊的中間 視角運動向量。這樣找到一個相同物件,並且使用此物件的運動。 因此,雖然運動較大,但是此物件的深度沒有改變,可更加準確 地預測中間視角運動向量。這個例子中,因為使用時間方向運動 向量找到的對應區塊的位置並非準確地複合4x4區塊單元,所以 最接近的4χ4區塊的運動資訊被使用,或者可使用重疊於對應區 塊的區域的比率重量所被應用的運動資訊。以下結合「第4圖 25 1344791 以22g替換頁 解釋這些方法的詳細實施例。 「第4A圖」、「第4B圖」、「第4C圖」以及「第4D圖」所示 為本發明實施例之當前區塊之運動向量之預測方法之示意圖,對 應於與當前區塊鄰接之鄰接區塊之參考影像處於視角方向或者時 間方向。 _ 如果鄰接區塊的每一蒼考影像數目不同於當前區塊的參考影 像數目,0或者其他的預測方法可用。例如,「第4A圖」表示每 -鄰接區塊涉及-個㈣方向影像,並且當前輯涉及—個時間 方向影像。箱I例子t,當前區塊的酬運動向量值可被設定為 〇。「第4B圖」表示每-鄰接區塊涉及—時間方向影像,而當前區 塊涉及-視肖方㈣像。③個例子巾’對於當能塊的預測運動 向量值,可應用「第2圖」或「第3圖」解釋的運動向量預測方 法。或者當前區塊的酬運動向量值可被設定為〇。 另-例子中,雜區塊中的兩個係涉及當前區塊的相同方向 的〜像例如’第4(:圖」表不在當前區塊涉及時間方向影像時, 兩個鄰接區塊涉物間方向影像並且剩_涉及視角方向影像。 l個例子巾’涉及時間方向影像的兩觸舰塊的運動向量被平 以待用作當前區塊的預測運動向量值。「第4D圖」表示在當 1品塊"及視角方向影像時,兩個鄰接區塊涉及視肖方向影像, 並且剩餘-_涉及時財向影像。這個例子中,涉及視角方向 的兩個雜區塊崎動向量被平均,以料當前區塊的預測 26 1344791 99 ^ ¥ 運動向量值。「第2圖」或「第3圖」解釋的運動&量預^ 應用至涉及時間方向影像的鄰接區塊。從對應獲得的運動向量和 兩個鄰接區塊的運動向量中得到中位數或重量平均值,以待被用 作當前區塊的預測運動向量值。 此外,「第2圖」或「第3圖」解釋待預測方法可透過區塊單 兀被應用至「第4A圖」、「第4B圖」、「第4C圖」和「第4D圖」。 「第5圖」所示為本發明另—實施例之使財間視角相關性 預測當前區塊的編碼資訊之方法。 對應區塊的尋找方法 當前區塊的運動向量的預測方法中,透過找到與當前區塊不 同視角處存在的對應區塊,可使騎應區塊的編碼資訊預測當前 區塊的編碼資訊。首先’以下解難當前區塊不同制處存二 列如’對應區塊可能為當前區塊的視角方向運動向量所扑示 =區塊。這個例子t,視角方向運動向量為表示中間視角差^ 人^運動向里的向量。「第3圖」的描述中解釋了全域運動向量的 I :=_表示相同時刻的鄰接視角的對應宏區塊的位 存在;τ _」’影像_存在於時間Ta,影像… 任於時間Ταπτ,而影像E和F存在 ,或—1_可能為固定影像:: C像=了 T。影像A、c和E存在於相同視: 和F存在於相同視角%處。影像c係為待 27 Π44791 一 ·一 99年12月22曰替換頁 解瑪的影像。f彡像D _應雜塊(macroblock ; MB) 區塊(當前宏區塊)的視角方向的全域運動向量GDVcurr所指示 的區鬼透過田别影像和當前影像之視角鄰接之視角影像之間的 宏區塊單元’可㈣全域運動向量。這侧子t,透過指示巾間. 視角參考關係的資訊,可知道鄰接視肖的資訊。 指示中間視角參考關係(視角附屬)的資訊意為指示哪種結 --構被用於·中間視詩列的資訊。這個可從視訊訊號的資料區; 域中得到。例如,此資訊可從序列參數集區域中得到。使用參考傷. 影像的數目和參考影像的視角資訊可制巾間視角的參考資訊。 例如’獲得總視角的數目。然後,根據總視角的數目可得到區別 每一視角的視角資訊。此外,可為每一視角的參考方向獲得參考 影像的數目。依照參考影像的數目,可獲得每一參考影像的視角 資訊。依照這種方式,可獲得中間視角參考資訊。依照固定影像 之例子和非固定影像之例子,可獲得中間視角之參考資訊。固定 影像識別資訊指示當前網路提取層中的編碼幀是否為固定影像,鲁 使用固定影像識別資訊可觀察到此現象。 獲得全域運動向量的方法依照固定影像識別資訊而變化。例 如,如果當前影像為固定影像,則可從接收的位元流中得到全域.· 運動向量。如果當前影像為非固定影像,可從固定影像中得到全 域運動向量。 這個例子中,指示時間距離的資訊連同固定影像的全域運動 28 1344791 99年12月22日替換頁 向量可被使用。例如’請參考「第5圖」,假設影像A的全域運動 向量被命名為GDVa,影像E的全域動向量被命名為DGVb,使 用衫像A和E (固定影像)的全域運動向量和時間距離資訊可獲 仔當前影像C (非固定影像)的全域運動向量。例如,時間距離 資訊包含影像順序數,指示影像輸出序列。因此,使用公式3可 ‘處當前影像的全域運動向量。
[公式3] x{GDVb-GDVa)\ 、 田別衫像的全域運動向量所指示的區塊可被視 為對應區塊,以預測當前區塊的編碼資訊。 對應H塊躺有私資訊和料魏可觀於酬當前區塊 、、為喝。編碼f财包含編碼當前區塊所需钱各種資訊, t運動咸:光線補償資訊、重量預測資訊等。如果運動省略 視應二至田心區塊,代替當前區塊的編碼運動資訊,不同 資处之刖編碼的树的運動資訊可完整地用作當前區塊的運動 的私省略模式包含根據鄰接視角處對應區塊 略模式被_至“ _縣纽關子。例如,如果運動省 區塊類型:㈣:宏Γ’則當前區塊的所有運動資訊例如宏 運動資訊。Μ,、細量料完魏被_#前宏區塊的 當前影賴她。tr#痛至™11子中。例如, 如馬解碼器相容的參考視角的影像,或者當 29 彡像。料’運動省 在的對應區塊的例子,並且在中間預狀鄰接視角處存 運動省略模她!、用 、憎編碼。如果 像_的運動資考資訊’優先使用參考影 「第6Γ 使用參考影像Listl的運動資訊。 測方法。」斤丁為本發明貫施例之當前區塊的編碼資訊之預 使用視㈣向中編碼資訊_難可更加準 前影像的編碼資訊與從時間方向獲得的前參考影=二, 編碼資訊具有極大的相關性。因此,使料些特徵可得 更準確的預測。以下結合「第6圖」解釋詳細實施例。 第6圖」中,水平轴指示時間轴(·,τι,τ2,υ。為了 便於解釋’參考#前影像,之前時間的影像的方向被命名為前向, 後面時間的影像的方向被命名為後向。同樣,垂直軸表示視角轴 (VI,V2, V3,… > 為了便於解釋,參考當前影像,之前影像 VI處的影像額被命名為前向,之後視角V3處的潍的方向被€ 命名為後向。 依照本發明實施例,使用從時間方向的當前影像的之前和之 後衫像中獲得的運動資訊,可酬視角方向的運動資訊。這種方 法也可使用模式資訊。例如,透過定義運動資訊預測模式,可通 知運動資訊預測模式將被應用。預測當前區塊的視角方向的運動 貧訊時,可使用共位區塊,共位區塊所處的位置與視角方向的當 30 1344791 99年12月22曰替換頁 刚區塊之A或之後的影像中的當前區塊的位置相同。從當前區瑰 的郴接區塊中預測得到視角方向運動向量之後,透過預測的運動 向量所指示的區塊。 例如,如果應用運動資訊預測模式,可完整地使用視角方向 中的當m影像的前影像R1和後影像⑽中的當前區塊的相同位置 (或者時間方向運動向I所指*的位置)的區塊的運動資訊。例 如,預測方向貧訊、分區資訊已經運動向量值可被完整地使用。 這個例子中,旗標資訊如這麵式將被,區塊文字調整量 可被編碼。紐另_實施例,测方向資訊和分區資訊可被完整 地使用。共位區塊的運動向量值mw' mv、mv3和mv4可被用作 當别區塊的預測運動向量值mvpL0#amvpu。因此,如果運動資 说預測模式被應用’指示對應模式的旗標資訊將被朗,運動向 量調整值和區塊文字調整值可被編碼。 依照另-實施例’之前實施例中當前區塊的預測方向資訊和 分區資訊不使用共位區塊(或者時間方向運動向量所指示的位置 處_塊)的預測方向資訊和分區資訊。例如,共位區塊的運動 向篁值可用作當祕塊的酬運動向量值,從#前區塊的鄰接區 塊中可得到當前區塊的預測方向f訊和分區資訊。這個例子中, 可編碼預測方向資訊和分區資訊。 依照另-實施例’如果當前區塊僅僅可包含視角方向的單一 參考影像,下面解釋當前影像的編耐訊的預測方法。例如,益 =否=個參考影像,如果可得到當前影像的4^^· 預測,或者可得到視备 饭次4 乃句的所向預測,下面解釋當前影像的編 碼資訊的預測方法。尤复 ,^'、也’寥考當前影像,假設目前有時間方 向的則向和後向參考影傻 ^ ’、豕K1和反2。將考察當前區塊的對應位置 :的扁馬貝A。將參考區塊的對應位置處的區塊是否包含視 角方向參找像或麵咐向參考影^ 像的對應位置的所有區塊僅僅包含時間方向的參 〜象則田剛區塊不使用參考影像的對應位置處的區塊的編碼 :如果參考影像的對應位置處的區选之一僅僅包含視角方向 >考〜像則可使用對龜塊的編碼資訊侧當前區塊的視角 方向編碼資訊。 旦如果時間方向㈣向和後向參考娜R1和R2涉及視角方向 的❿像’僅僅從兩個參考影像財之—可預測當祕塊的編碼資 :。依照預設的約定’制編碼資訊可判斷兩個參考影像其中之 、例如’識別兩個參考影像的分區資訊之後,可使用包含較小 分區的參考影像的分㈣訊。尤其地,根據分區大小比另-個小 的參考影像的分區資訊,可預測當前區塊的分區資訊。以下結合 「第7圖」解釋詳細實施例。 。 第7圖」所示為本發明實施例之如果時間方向的前向與後 =參考區塊均為-個視角方法的區塊,則選擇或者前向參考區塊 或者後向參考區塊以預測當前區塊之分區資訊之*同實例之表 32 1344791 99年12月22曰替換頁 格。 如果複數個參考區塊的分區資訊之一被選擇以預測當前區塊 的分區資訊,可使用複數個參考區塊的分區資訊中包含較小區塊 的參考區塊的分區資訊。如果時間方向的前向和後向參考區塊的 分區資訊包含相同的分區資訊,可預測當前區塊的分區資訊為相 同資訊。然而,如果時間方向的前向和後向參考區塊的分區資訊 包含不同的資訊,則可做出選擇。 ® 例如,如果時間方向的前向參考區塊的分區資訊指示直接模 式並且如果後向分區區塊的分區資訊為16><16、16χ8、8x16或 者8x8,則當前區塊的分區資訊可被預測為16χ16、16χ8、8χΐ6 或者8χ8。如果時間方向的前向參考區塊的分區資訊指示〗6χ8, 並且如果後向參考區塊的分區資訊指示8χ8,則可使用子劃分分區 Μ作為當前區塊的預·區資訊值。如果_方向的前向參考區 鲁塊的分區資訊指示㈣,並且後向參考區塊的分區資訊指示 16χ8 ’可使用子劃分分區8χ8作為當前區塊的預測分區資訊值。 \ 「第7圖」所示之分區f訊之實例可能無法應用至計劃使用 對應位置的區塊的編碼資訊_子。這個例子中,僅僅使用對應 區塊的麵方向編碼資訊糊當__軸方向編碼資訊。; 如’如果參考區塊的分㈣訊和當前區塊的分區資訊匹配,則可 完整地使㈣應區塊的制方向運動資訊。這_子中,如果存 在前向和後向參考⑽’透料均兩财向_應分區的視角方 33 1344791 99年12月22日替換頁 向運動向量或者應用時間軸上距離比的重量,可找到視角方向的 預測運動向量值。或者’依照既定的約定可使用—個方向的資訊。 如果參考區塊的分區資訊和當前區塊的分區資訊不匹配,區 塊内的運動向量被平均以使用。例如,當當前區塊的分區資訊為 16x16區塊時’如果參考區塊被預測為16χ8,則可使用兩個16竓 參考區塊的平均物向量作為16χ16當前區塊的綱運動向量 值如果參考區塊存在於前向和後向兩個方向中,如此方法之前
所述’透過平均各方向的參考區塊⑽分區的運動向量,找到預 測的運動向量之後,兩個方向騎應時間方向的運動向量被平 均,j者重量透科間軸上的距離峨應肋發現最終預測的運 動向量值。或者’可依照既定約定制—個方向的向量。 即使時間方向的前向和後向參考影像R1和R2係涉及時度 _影像’和以上的例子—樣,或者參考影像R1或參考影像 二例如個或者前向參考縣R1或者後向參考影像幻預 虽别區塊的編碼資訊。 ,資訊可被使用以指示是否兩個參考影像幻和. >考衫像或者後向參考影像被使用。 旦, -μ明’在當前影像可包含複數 衫像時,解釋這種當前影像的編碼 二·」 角方向的前向預測、後向_以及雙向預=方=。例^ 像的編碼資物。_ —解釋* 如則面貫施例的先 34 99年12月22曰替換頁 述一樣,可應用相同的方式。 仏步^方方向的前向和後向參考卿和 預測告寸 一 攸兩個參考影像之一的編碼資訊可 區塊編=^錢°依照預^訊可判斷使用的兩個參考 卿兩驗本貝^ °例如’預測編媽資訊的預測方向資訊時, =,的_方向資訊,然後使用可包含它們的參寺 〜像的預測方向資訊。結合「第8圖」解釋詳細實施例。 ^ 8圖」所示為本翻實_之如果時財_前向與後 二塊均為—個視衫法的區塊,_擇或者前向參考區塊 或者後向參考區塊簡測當能塊之_方向資訊之㈣實例之 表格。 、 如果選擇複數個參考區塊的預測方向資訊之…以預測當前 區塊的預測方向資訊,可使賴數個參考區塊的預測方向資訊中 可包含它們的參考影像的酬方向資訊。如果時财向的前向或 後向參考區塊的删方向資訊包含相_預測方向資訊,當前區 塊的預測方向資訊可被預測為相同的資訊。然而,包含不同資訊 的隋况下可做出選擇。例如,如果時間方向的前向參考區塊的預 測方向育訊指示視衫向的前向,並且如果視肖方向的後向參考 區塊的預測方向資訊指示視角方向的後向,則可雙向地預測當前 區4的預射向*訊。如果視肖方向的前向參相塊的預測方向 貝訊心不視角方向的雙向’並且如果時財向的後向參考區塊的 35 1344791 99年12月22日替換頁 預測方向資訊指示視角方向的前向或者後向,則包含它們的雙向 可被預測為當前區塊的預測方向資訊。 「第9圖」所示為本發明實施例之當前區塊之視角方向之編 碼資訊之預測方法之流程圖。
首先仗視況§fl说中獲得中間視角編碼資訊預測模式資訊(步 驟910)。如果中間視角編碼資訊預測透過預測模式資訊被應用, 則檢查結合當前區塊的視角方向的參考區塊是否包含視角方向的 編碼資訊(步,驟92〇)。這個例子中,參考區塊可為共位區塊,位 於當前區塊的位置相_位置處。或者,參考區塊為#前區塊的 鄰接區塊得到的運動向量所指示的區塊。這個例子中,如果參考 區选不包含視角方向的編碼資訊,當前區塊可制當前區塊的零 件區塊的編碼資訊_#前區_編碼纽(步驟㈣)。然而, 如果參考區塊包含視財向的編碼資訊,可應料種方法。例如 檢查整個參考區塊中存在多少各具有視角方向的編碼資訊的參: 品鬼(v驟940)。如果整個參考區塊中的複數個參考區塊包含] :的扁UK可使用參考區塊的編碼資訊預測當前區塊# 編,貝訊例如,依照預設約定(步驟95G),可使用參考區塊f =資訊或制方㈣轉為讀區塊的分㈣喊者預測心 如果參考區塊之—包含視角方向賴碼資訊,職查參j 2疋否包含時間方向的編媽資訊 如果參考區塊不包麵間方向的編騎訊,則可制參—考 36 1344791 99年12月22日替換頁 視角方向的編碼貧訊作為當前區塊的編碼資訊的預測值(步驟 970)。如果此賴不可用,則使用當前區麟接的區塊的編碼資 訊獲得當前區塊的預測編碼資訊值(步驟930)。 「第10圖」所示為本發明實施例之當前區塊之編碼資訊之預 測方法之流程圖。 多視角視訊編碼時,可使用當前區塊的鄰接區塊的編碼資訊 以預測當前區塊的編碼資訊。例如,編碼資訊可包含運動資訊、 預測方向資訊、分區資訊、光線補償資訊等。然而,鄰接區塊可 指不同時區上相同視角的影像或者相同視角上不同視角的影像。 鄰接區塊也可指不同時區上不同視角的影像。因此,選擇性地依 照當前區塊所指影像處於視角方向或者時間方向,鄰接區塊的編 碼資訊的使用方法更加有效。因為視角方向的編碼資訊和時間方 向的編碼資訊直接的相關性較低,完成中間視角預測時可不同地 涉及一種編碼資訊的預測方法。以下結合「第1〇圖」解釋詳細實 施例。 「第10圖」中,水平軸指示時間軸(·,Τ1,Τ2,Τ3,·,)。為 了便於解釋,參考當前影像(Τ2) ’之前時間T1的影像方向被命 名為前向,而之後時間T3的影像方向被命名為後向方向。同樣, 垂直軸指示視角軸(…,VI,V2, V3, .·.)。為了便於解釋,參考當 前影像,之前視角vi的影像方向被命名為前向,而之後視角V3 的影像方向被命名為後向。 37 1344791 99年12月22日替換頁 依照本發明實麵,鄰麟t__㊣塊 編碼資訊可用於_當前區塊的期方向的編碼資訊。例如,如 果:接區塊指時方⑽影像,則可制鄰接區塊的編碼資訊作為、 當别區塊的預測編碼資訊值。如果鄰接區塊指時間方向的影像, 則可設定鄰無塊的編碼資訊為G。如果在鄰接區塊上完成=測内 部編碼,鄰接區塊的編辦訊不使用或者設定為〇。 依照本發明另—實施例,如果鄰接於當前區塊的區塊B指時 間方向的影像R3,可使用時間方向的參考影像Μ的編媽資訊預麝 測當前區塊的視肖方向的編碼:#訊。例如,首先發現鄰接於當前 區塊的區塊Β的運動向量所指稀位㈣區塊。這侧子中,和 「第10圖」所示的參考影像R3 —樣,鄰接區塊Β的運動向量所 指示的位置的區塊未必準確地符合參考影像Μ的歸一化網格内 的區塊之一。即,可能重疊於複數個區塊。這個例子中,各種實 施例可被應用以預測當前區塊的視角方向的編碼資訊。 依照實施例’可檢查鄰接區塊Β的運動向量所指示的位置處籲 的區塊的重疊的區塊中,衫存在涉及視角方向的影像的區塊。 例如,如果鄰接區塊Β的運動向量所指示的位置處的區塊的重φ · 區塊中不存在涉及視角方向的影像的單個區塊(例如時間方向中 預測的區塊實例,内部預測區塊實例),則不使用重疊的區塊。當 重疊區塊完全被除去後,如果無法預測當前區塊的視角方向的運 動向量,鄰接區塊Β不被使用以預測當前區塊的運動向量或者被 38 1344791 99年12月22日替換頁 設定為0 〇 ----- 」而如果存’重$區塊中在涉及視角方向的影像的至少一 個區塊’可使用包含最大重疊區塊的區塊的編碼資訊。例如,可 使用包含最大重疊_的區塊的視角方向的運動向量值作為當前 區塊的視角方向的酬運動向量值。或者,如果至少兩個區塊最 廣泛地重疊於相同區域,可找到最大重疊區塊的平均值或中位 數。或者’可制朗重量至各重疊區塊所產生的值。或者,可 使用簡單地平均各重疊區域的方法。如果在重疊區域的區塊 上完成雙向酬編碼’以上解釋的方法可躺於細各視角方向 的編碼資訊。 因為多視角視訊景彡像能夠在時間方向上實現雙向預測,以下 詳細的演算法可應用至每一實例。 首先’參考咖方向的影像,如果預測方向或者為前向或者 為後向’社_的方法可^整地被朗。細,在時間方向的 例子中’可確認使用時間方向的運動向量發現的區塊係為視角方 向的影像。如果僅僅兩個方向之—係為視角方向的影像,可使用 僅僅涉及視角方向的影像的區塊的編碼資訊。然而,如果雙向參 考區塊涉及視角方向的影像,可使用雙向參考區塊的編碼資訊。 這個例子中,使用雙向參考區塊的編碼資訊時,可完整地應用以 上解釋。例如,區塊涉及當前區塊之鄰接區塊的運動向量所指示 位置出的區塊的重疊區塊中的視角方向的影像,可使用此區塊的 39 編碼資訊。使用方法的έ ______替 各__::::=^^ ㈣之實例。例如’參考區塊對應視角方向的前向:=考 測或者雙向酬。可絲地_至每1、實^向預 果獲讀向參考區塊的編碼資訊編碼資訊被平均以用作 田士則的一鄰接區塊的視角方向編碼資訊。這個例子中,如果 〜間杨參考區塊在時間輯上柯於時間後向參考區塊,可應 用重量。 透過以上解釋的方法為當前區塊的每—鄰接區塊預測視角方 向的編碼資訊之後’可預測當前區塊的編碼資訊。或者,在透過 習知技術方法酬當前區塊的編⑽料中,可透過以上解 釋的方法預測視角方向的編碼資訊。 「第11圖」所示為本發明實施例之當前區塊之視角方向之編 碼資訊之預測方法之流程圖。 首先,可檢查當前區塊的鄰接資訊是否涉及視角方向的影像 (步驟1110)。這個例子中,可依照預定的順序檢查鄰接區塊。例 如,首先檢查當前區塊的左側的區塊(A),檢查當前區塊上面的 區塊(B) ’檢查上部區塊(B)的右侧區塊(c),然後檢查上部 區塊(B)的左側區塊(D)。或者,在首先檢查上部區塊(B)之 後,按順序檢查當前區塊的左側區塊(A)、上部區塊(B)的右 側區塊(C)以及上部區塊(B)的左側區塊(D)。如果依照檢查 1344791 99年12月22日替換頁 程序此鄰接區塊涉及視角方向的影像,可使用鄰接區塊的視角方 向的編碼資訊預測當前區塊的編碼資訊。然而,如果鄰接區塊不 ' 涉及視角方向的影像,例如如果鄰接區塊被内部編碼,則鄰接區 * 塊的編碼資訊不被使用或者被設定為〇 (步驟1130)。 依照另一實施例,鄰接區塊不涉及視角方向的影像的情況 下,如果鄰接區塊涉及時間方向的影像,可在時間方向搜索參考 區塊(步驟1140)。並且可檢查在哪處部位搜索的區塊重疊於時間 *方向的參考影像的區塊。這個例子中,可檢查重疊區塊中是否存 在一個區塊,涉及視角方向的影像(步驟115〇)。如果重疊區塊不 涉及視角方向的影像’則重疊區塊的編碼資訊不被使用或者被設 定為0 (步驟1160)。然而如果重叠區塊涉及視角方向的影像,可 使用重疊區塊的視角方向的編碼資訊預測當前區塊的編碼資訊 (步驟1170)。這個例子中’如果存在至少一個區塊,涉及重疊區 鲁塊終歸的視角方向的影像,則可使用包含最大重疊區域之區塊之 編碼資訊。例如’可使用包含最大重疊區域的區塊的視角方向的 運動向量值作為當祕塊的視財向的侧運動向量值。如果至 少兩麵域最大範圍地重疊__區域,可找到最大範圍重叠 的區塊的平均值或中位值。或者’―種應用重量至每—重疊區域 的方法可被應用。如果視角方向的雙向預測編碼完成於用作重疊 區域的區塊之上,「第10圖」解釋的方法可使用每一視角方向的 編碼資訊。 41 1344791 & 曰替換頁 如刖所述,本發明之一種訊號處理裝置提供用^- 廣播(digital multimedia broadcasting ; DMB)之多媒體廣播發送 /接收裝置,錢胁解碼視賊號、資料喊等。多魏廣播、 發送/接收裝置可包含移動通訊終端。 . 本發明之吼號處理方法可儲存於電腦可讀記錄媒介中,準備 作為電腦中執行的程式。本發明之包含資料結果之多媒體資訊可 τ 被儲存於電腦可讀取記錄齡巾。此外,電腦可讀取媒介包含電,· 腦系統可讀取的用於儲存資訊的各種儲存裝置。電腦可讀取媒介籲 包含唯讀記憶體、隨機儲存記鍾、絲唯讀記憶體、磁帶、軟 培碟、光學資贿存裝置等,並且還包含賴波形式(例如 際網路傳輪)實現的媒介^編碼方法產生的位歧儲存於電 腦可。貝取媒或者透過固接線路/無線通訊網路被傳輸。 —雖然本發明以前述之較佳實施例揭露如上,然其並非用以限 疋本發明’任何熟悉她技藝者,在不脫縣發明之精神和範圍 内田可作些許之更動與潤飾,因此本發明之專利保護範圍須視籲 本說明書所社中請專利範騎界定者為準。 〗因此’視訊訊號資料的壓縮編碼技術考慮空間複製、時間複' 製、可調複如及中間制複製。魏編碼程种,透過考慮時. 間直接存在的互姆複可完賴縮編碼。考慮中間視角複製的壓 縮編媽即使僅為本發明之—種實施例。本發明之技術構想可應用 至時間複製、可調複製等。 42 1344791 99年12月22日替換頁 【圖式簡單說明】 S1騎4本發明之視訊訊號解碼器之方塊圖; ‘ 第2圖所示為本發明實施例之當前單蚊編碼資訊之預測方 法之示意圖; , 帛3圖所示為本發明實施例之運動向量之預測方法之示意圖; ,胃帛4A圖至第4D圖所示為本發明實施例之當前區塊之運動向 .·里之测方法之*意圖,對應於與當前區塊鄰接之鄰接區塊之參 考影像是處於視角方向還是時間方向; a第5 ®所示為本發明另—實施例之使财間視角之相關性之 當前區塊之編碼資訊之預測方法示意圖; 第6圖所示為本發明實施例之當前區塊之編碼資訊之預測方 法之示意圖; 第7圖所示為本發明實施例之如果時間方向的前向和後向參 •考區塊均涉及視角方向的區塊,則選擇或者前向參考區塊或者後 向參考區塊以預測當前區塊之分區資訊之不同實例之表格; ' 第8圖所示為本發明實施例之如果時間方向的前向與後向參 • 考區塊均涉及視角方向的區塊,則選擇或者前向參考區塊或者後 向參考區塊以預測當前區塊之預測方向資訊之不同實例之表格; 第9圖所示為本發明實施例之當前區塊之視角方向之編碼資 訊之預測方法之流程圖; 第10圖所示為本發明實施例之當前區塊之編碼資訊之預測方 43 1344791 99年 12月22曰替換頁 法之流程圖;以及 第11圖所示為本發明另一實施例之當前區瑰之視角方向之編 碼資訊之預測方法之流程圖。 【主要元件符號說明】 100 200 300 400 500 600 700 710 720 730
網路提取層解析單元 信息量解碼單元 反向量化/反向轉換單元 内部預測單元 解塊濾波器單元 解碼影像緩衝器單元 中間預測單元 光線補償輕量預測單元 光線補償單元 運動補償單元
44

Claims (1)

  1. 99年12月22日替換頁 十、申請專利範圍: L 一種訊號處理方法,包含有: 搜尋-關聯區塊’該關聯區塊係存在於與一當前區塊相同 之時區的不同視角上; 獲得該關聯區塊之一運動資訊;以及 將該當前眺之運動資訊設定為觸魏塊之運動資訊, /其中’該當前區塊之運動資訊與該關聯區塊之運動資訊, 係包含:-運動向量與一參考索引中之至少一個,其中該參考 索引係用於指示該當前區塊所涉及之參考影像的參考影像數。 2·如申請專纖圍第丨顧述之峨處財法,還包含: 取該當祕塊之—運動省略資訊,該運動省略資訊係表 不是否產生了該當前區塊之運動資訊, -中’糊聯H塊之運動資訊係輯該運㈣略資訊獲 付。 如申請專概㈣1項崎之峨•方法,其機1聯區塊 係為透過向存在於—當祕動目同辆上的不同視角上之一 單元施加-全域運動向量而獲得的一區塊。 4. ,其中從一固定單 如申請專概_ 3項觸找號處理方法 元導出該第-域上該單元之該全域運動向量 45
TW096125506A 2006-07-12 2007-07-12 A method and apparatus for processing a signal TWI344791B (en)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US83008706P 2006-07-12 2006-07-12
US84793006P 2006-09-29 2006-09-29
US85376906P 2006-10-24 2006-10-24
US85470206P 2006-10-27 2006-10-27
US88635007P 2007-01-24 2007-01-24
US90958207P 2007-04-02 2007-04-02
US90796407P 2007-04-25 2007-04-25

Publications (2)

Publication Number Publication Date
TW200826683A TW200826683A (en) 2008-06-16
TWI344791B true TWI344791B (en) 2011-07-01

Family

ID=38923431

Family Applications (2)

Application Number Title Priority Date Filing Date
TW096125506A TWI344791B (en) 2006-07-12 2007-07-12 A method and apparatus for processing a signal
TW096125507A TWI344792B (en) 2006-07-12 2007-07-12 A method and apparatus for processing a signal

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW096125507A TWI344792B (en) 2006-07-12 2007-07-12 A method and apparatus for processing a signal

Country Status (7)

Country Link
US (2) US20090290643A1 (zh)
EP (1) EP2052546A4 (zh)
JP (1) JP5021739B2 (zh)
KR (1) KR101370919B1 (zh)
CN (1) CN101491096B (zh)
TW (2) TWI344791B (zh)
WO (2) WO2008007913A1 (zh)

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8131095B2 (en) * 2003-02-03 2012-03-06 Actimagine Process and device for the compression of portions of images
US8179969B2 (en) * 2006-08-18 2012-05-15 Gwangju Institute Of Science And Technology Method and apparatus for encoding or decoding frames of different views in multiview video using global disparity
US8355438B2 (en) * 2006-10-30 2013-01-15 Nippon Telegraph And Telephone Corporation Predicted reference information generating method, video encoding and decoding methods, apparatuses therefor, programs therefor, and storage media which store the programs
KR101365574B1 (ko) * 2007-01-29 2014-02-20 삼성전자주식회사 영상 부호화 방법 및 장치, 복호화 방법 및 장치
US8155461B2 (en) * 2007-03-27 2012-04-10 Samsung Electronics Co., Ltd. Methods and apparatuses for encoding and decoding multi-view image
KR20080107965A (ko) * 2007-06-08 2008-12-11 삼성전자주식회사 객체 경계 기반 파티션을 이용한 영상의 부호화, 복호화방법 및 장치
CN101415115B (zh) * 2007-10-15 2011-02-02 华为技术有限公司 基于运动跳跃模式的视频编解码方法及其编解码器
JP2011509631A (ja) * 2008-01-11 2011-03-24 トムソン ライセンシング ビデオおよび奥行きの符号化
JP5111127B2 (ja) * 2008-01-22 2012-12-26 キヤノン株式会社 動画像符号化装置及びその制御方法、並びに、コンピュータプログラム
KR101727311B1 (ko) 2008-04-25 2017-04-14 톰슨 라이센싱 깊이 정보에 기초한 디스패리티 예측을 구비한 다중 시점 비디오 코딩
BRPI0916963A2 (pt) 2008-08-20 2015-11-24 Thomson Licensing mapa de profundidade refinado
US20100086051A1 (en) * 2008-10-06 2010-04-08 Lg Electronics Inc. Method and an apparatus for processing a video signal
EP2377074A4 (en) 2009-01-07 2017-06-14 Thomson Licensing Joint depth estimation
EP3376768B1 (en) * 2009-01-15 2020-09-30 Renesas Electronics Corporation Image decoding method and apparatus
US9066107B2 (en) * 2009-01-28 2015-06-23 France Telecom Methods for encoding and decoding sequence implementing a motion compensation, corresponding encoding and decoding devices, signal and computer programs
BR112012008988B1 (pt) 2009-10-14 2022-07-12 Dolby International Ab Método, meio legível não transitório e aparelho para processamento de mapa de profundidade
KR101522850B1 (ko) * 2010-01-14 2015-05-26 삼성전자주식회사 움직임 벡터를 부호화, 복호화하는 방법 및 장치
KR101768207B1 (ko) * 2010-01-19 2017-08-16 삼성전자주식회사 축소된 예측 움직임 벡터의 후보들에 기초해 움직임 벡터를 부호화, 복호화하는 방법 및 장치
CN104967857B (zh) 2010-01-19 2019-08-23 三星电子株式会社 对图像进行编码/解码的方法和设备
WO2011121227A1 (fr) * 2010-03-31 2011-10-06 France Telecom Procedes et dispositifs de codage et de decodage d'une sequence d'images mettant en œuvre une prediction par compensation de mouvement avant, flux et programme d'ordinateur correspondants
JP5368631B2 (ja) 2010-04-08 2013-12-18 株式会社東芝 画像符号化方法、装置、及びプログラム
PL3779979T3 (pl) * 2010-04-13 2024-01-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Sposób dekodowania audio do przetwarzania sygnałów audio stereo z wykorzystaniem zmiennego kierunku predykcji
US9014271B2 (en) * 2010-07-12 2015-04-21 Texas Instruments Incorporated Method and apparatus for region-based weighted prediction with improved global brightness detection
JP4938884B2 (ja) * 2010-09-30 2012-05-23 シャープ株式会社 予測ベクトル生成方法、画像符号化方法、画像復号方法、予測ベクトル生成装置、画像符号化装置、画像復号装置、予測ベクトル生成プログラム、画像符号化プログラムおよび画像復号プログラム
US9462272B2 (en) * 2010-12-13 2016-10-04 Electronics And Telecommunications Research Institute Intra prediction method and apparatus
WO2012081895A1 (ko) 2010-12-13 2012-06-21 한국전자통신연구원 인트라 예측 방법 및 그 장치
KR101893559B1 (ko) 2010-12-14 2018-08-31 삼성전자주식회사 다시점 비디오 부호화/복호화 장치 및 방법
JP2012209911A (ja) * 2010-12-20 2012-10-25 Sony Corp 画像処理装置および方法
WO2012090497A1 (ja) * 2010-12-28 2012-07-05 パナソニック株式会社 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、及び動画像符号化復号装置
PT4033760T (pt) * 2010-12-31 2025-03-31 Univ Industry Cooperation Group Kyung Hee Univ Método para codificar informação de vídeo e método para descodificar informação de vídeo, e aparelho que utiliza os mesmos
US20120189060A1 (en) * 2011-01-20 2012-07-26 Industry-Academic Cooperation Foundation, Yonsei University Apparatus and method for encoding and decoding motion information and disparity information
WO2012108315A1 (ja) * 2011-02-07 2012-08-16 シャープ株式会社 予測情報生成方法、画像符号化方法、画像復号方法、予測情報生成装置、予測情報生成プログラム、画像符号化装置、画像符号化プログラム、画像復号装置および画像復号プログラム
JP5323273B2 (ja) 2011-02-10 2013-10-23 パナソニック株式会社 動画像符号化方法、及び動画像符号化装置
KR20120095610A (ko) * 2011-02-21 2012-08-29 삼성전자주식회사 다시점 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP5747559B2 (ja) * 2011-03-01 2015-07-15 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム
US9635385B2 (en) * 2011-04-14 2017-04-25 Texas Instruments Incorporated Methods and systems for estimating motion in multimedia pictures
KR20120118780A (ko) * 2011-04-19 2012-10-29 삼성전자주식회사 다시점 비디오의 움직임 벡터 부호화 방법 및 장치, 그 복호화 방법 및 장치
US9247249B2 (en) * 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding
WO2012153440A1 (ja) * 2011-05-09 2012-11-15 シャープ株式会社 予測ベクトル生成方法、予測ベクトル生成装置、予測ベクトル生成プログラム、画像符号化方法、画像符号化装置、画像符号化プログラム、画像復号方法、画像復号装置、及び画像復号プログラム
WO2012172634A1 (ja) * 2011-06-13 2012-12-20 株式会社東芝 画像符号化装置、画像復号化装置、方法およびプログラム
WO2013001748A1 (ja) * 2011-06-29 2013-01-03 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
MX341889B (es) 2011-06-30 2016-09-07 Sony Corp Dispositivo de procesamiento de imagenes y metodo de procesamiento de imagenes.
JP2014523708A (ja) * 2011-07-01 2014-09-11 モトローラ モビリティ エルエルシー 動きベクトル予測設計の簡易化
WO2013022281A2 (ko) 2011-08-09 2013-02-14 삼성전자 주식회사 다시점 비디오 예측 부호화 방법 및 그 장치, 다시점 비디오 예측 복호화 방법 및 그 장치
US10034018B2 (en) 2011-09-23 2018-07-24 Velos Media, Llc Decoded picture buffer management
WO2013055148A2 (ko) 2011-10-12 2013-04-18 엘지전자 주식회사 영상 인코딩 방법 및 디코딩 방법
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
US9185428B2 (en) 2011-11-04 2015-11-10 Google Technology Holdings LLC Motion vector scaling for non-uniform motion vector grid
JP5979848B2 (ja) * 2011-11-08 2016-08-31 キヤノン株式会社 画像符号化方法、画像符号化装置及びプログラム、画像復号方法、画像復号装置及びプログラム
WO2013068548A2 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient multi-view coding using depth-map estimate for a dependent view
EP3462742A1 (en) * 2011-11-11 2019-04-03 GE Video Compression, LLC Multi-view coding with exploitation of renderable portions
WO2013068562A1 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding
EP4161078A1 (en) 2011-11-11 2023-04-05 GE Video Compression, LLC Effective wedgelet partition coding using spatial prediction
WO2013068493A1 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multi-view coding with effective handling of renderable portions
KR101810916B1 (ko) 2011-11-11 2017-12-20 지이 비디오 컴프레션, 엘엘씨 분할 코딩을 이용한 효과적인 예측
CN109257599B (zh) 2011-11-11 2023-05-16 Ge视频压缩有限责任公司 解码器、编码器及重构、编码、解码、传送和处理方法
KR102090106B1 (ko) * 2011-11-11 2020-03-17 지이 비디오 컴프레션, 엘엘씨 깊이-맵 추정 및 업데이트를 사용한 효율적인 멀티-뷰 코딩
EP3739886A1 (en) 2011-11-18 2020-11-18 GE Video Compression, LLC Multi-view coding with efficient residual handling
JP5915168B2 (ja) * 2011-12-27 2016-05-11 富士通株式会社 符号化装置、復号装置、動画像処理システム、符号化方法、復号方法、符号化プログラム、および復号プログラム
US20130176390A1 (en) * 2012-01-06 2013-07-11 Qualcomm Incorporated Multi-hypothesis disparity vector construction in 3d video coding with depth
CN102595164A (zh) * 2012-02-27 2012-07-18 中兴通讯股份有限公司 一种视频图像发送方法、装置及系统
US9525861B2 (en) * 2012-03-14 2016-12-20 Qualcomm Incorporated Disparity vector prediction in video coding
US9445076B2 (en) * 2012-03-14 2016-09-13 Qualcomm Incorporated Disparity vector construction method for 3D-HEVC
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
US10200709B2 (en) 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
US9549180B2 (en) 2012-04-20 2017-01-17 Qualcomm Incorporated Disparity vector generation for inter-view prediction for video coding
WO2013176485A1 (ko) * 2012-05-22 2013-11-28 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US9172970B1 (en) 2012-05-29 2015-10-27 Google Inc. Inter frame candidate selection for a video encoder
US11317101B2 (en) 2012-06-12 2022-04-26 Google Inc. Inter frame candidate selection for a video encoder
US9998726B2 (en) 2012-06-20 2018-06-12 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
WO2014005280A1 (en) * 2012-07-03 2014-01-09 Mediatek Singapore Pte. Ltd. Method and apparatus to improve and simplify inter-view motion vector prediction and disparity vector prediction
KR101966920B1 (ko) 2012-07-10 2019-04-08 삼성전자주식회사 다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치
US9357195B2 (en) * 2012-08-16 2016-05-31 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
US9648318B2 (en) * 2012-09-30 2017-05-09 Qualcomm Incorporated Performing residual prediction in video coding
JP6788346B2 (ja) 2012-10-01 2020-11-25 ジーイー ビデオ コンプレッション エルエルシー ベース層からの予測のための副ブロックの副分割の派生を使用するスケーラブルビデオ符号化
WO2014053085A1 (en) * 2012-10-03 2014-04-10 Mediatek Inc. Method and apparatus of motion information management in video coding
US9544612B2 (en) * 2012-10-04 2017-01-10 Intel Corporation Prediction parameter inheritance for 3D video coding
US9485515B2 (en) 2013-08-23 2016-11-01 Google Inc. Video coding using reference motion vectors
US9503746B2 (en) 2012-10-08 2016-11-22 Google Inc. Determine reference motion vectors
CN102946535B (zh) * 2012-10-09 2015-05-13 华为技术有限公司 预测块的视差矢量预测值获取的方法和装置
JP2014093602A (ja) * 2012-11-01 2014-05-19 Toshiba Corp 画像処理装置、画像処理方法、画像処理プログラム、および立体画像表示装置
EP2919464A4 (en) * 2012-11-07 2016-05-11 Lg Electronics Inc DEVICE AND METHOD FOR PROCESSING VIDEO SIGNALS
KR101680674B1 (ko) 2012-11-07 2016-11-29 엘지전자 주식회사 다시점 비디오 신호의 처리 방법 및 이에 대한 장치
US9350970B2 (en) * 2012-12-14 2016-05-24 Qualcomm Incorporated Disparity vector derivation
US9516332B2 (en) * 2012-12-21 2016-12-06 Qualcomm Incorporated Disparity vector derivation in three-dimensional video coding
EP2941867A4 (en) * 2013-01-07 2016-07-06 Mediatek Inc METHOD AND DEVICE FOR DERIVING A PREDICTION OF SPATIAL MOTION VECTORS FOR DIRECT AND SKIP MODES IN A THREE-DIMENSIONAL VIDEO-CORDING
US20160073125A1 (en) * 2013-04-12 2016-03-10 Nippon Telegraph And Telephone Corporation Video encoding apparatus and method, video decoding apparatus and method, and programs therefor
MX344186B (es) * 2013-04-12 2016-12-08 Ericsson Telefon Ab L M Construccion de listas de imagenes de referencia entre capas.
US9288507B2 (en) * 2013-06-21 2016-03-15 Qualcomm Incorporated More accurate advanced residual prediction (ARP) for texture coding
US9973759B2 (en) 2013-07-08 2018-05-15 Hfi Innovation Inc. Method of simplified CABAC coding in 3D video coding
KR101631281B1 (ko) * 2013-07-12 2016-06-16 삼성전자주식회사 뷰 합성 예측을 이용한 인터 레이어 비디오 복호화 방법 및 그 장치 뷰 합성 예측을 이용한 인터 레이어 비디오 부호화 방법 및 장치
US9860529B2 (en) * 2013-07-16 2018-01-02 Qualcomm Incorporated Processing illumination compensation for video coding
CN105659604B (zh) * 2013-10-18 2018-12-21 Lg电子株式会社 在多视图视频编译中预测视图合成的方法和用于通过使用其构建合并候选列表的方法
WO2015141549A1 (ja) * 2014-03-20 2015-09-24 日本電信電話株式会社 動画像符号化装置及び方法、及び、動画像復号装置及び方法
KR102260146B1 (ko) 2014-03-31 2021-06-03 인텔렉추얼디스커버리 주식회사 시점 간 움직임 병합 후보 유도 방법 및 장치
WO2016004850A1 (en) * 2014-07-07 2016-01-14 Mediatek Singapore Pte. Ltd. Method of intra block copy search and compensation range
JP6052319B2 (ja) * 2015-03-25 2016-12-27 Nttエレクトロニクス株式会社 動画像符号化装置
US10404992B2 (en) * 2015-07-27 2019-09-03 Qualcomm Incorporated Methods and systems of restricting bi-prediction in video coding
US10694187B2 (en) * 2016-03-18 2020-06-23 Lg Electronics Inc. Method and device for deriving block structure in video coding system
CN116708781A (zh) * 2016-07-12 2023-09-05 韩国电子通信研究院 图像编码/解码方法以及用于该方法的记录介质
CN110136150B (zh) * 2018-02-08 2021-03-16 北京深境智能科技有限公司 物体图像自动抠取方法和系统
KR20240138136A (ko) * 2018-12-06 2024-09-20 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
CN113615194B (zh) * 2019-03-05 2023-06-06 华为技术有限公司 使用抽取预测块的dmvr
US11146808B2 (en) * 2019-06-27 2021-10-12 Tencent America LLC Method and apparatus for video coding
KR20220051842A (ko) 2019-09-18 2022-04-26 삼성전자주식회사 움직임 정보의 부호화 장치 및 방법, 및 복호화 장치 및 방법

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0698312A (ja) 1992-09-16 1994-04-08 Fujitsu Ltd 画像高能率符号化方式
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
AU728966B2 (en) 1997-01-13 2001-01-25 Koninklijke Philips Electronics N.V. Embedding supplemental data in a digital video signal
JPH11252552A (ja) * 1998-03-05 1999-09-17 Sony Corp ビデオ信号の圧縮符号化方法及び圧縮符号化装置、並びに、圧縮符号化データの多重化方法及び多重化装置
US6167084A (en) 1998-08-27 2000-12-26 Motorola, Inc. Dynamic bit allocation for statistical multiplexing of compressed and uncompressed digital video signals
KR100375708B1 (ko) 2000-10-28 2003-03-15 전자부품연구원 3차원 입체영상을 위한 다시점 비디오 시스템 및영상제조방법
KR100397511B1 (ko) 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
KR100481732B1 (ko) * 2002-04-20 2005-04-11 전자부품연구원 다 시점 동영상 부호화 장치
EP1418762A1 (en) * 2002-05-22 2004-05-12 Matsushita Electric Industrial Co., Ltd. Moving image encoding method, moving image decoding method, and data recording medium
CN1299502C (zh) 2002-06-20 2007-02-07 索尼株式会社 解码设备和解码方法
JP4403404B2 (ja) 2002-06-20 2010-01-27 ソニー株式会社 復号装置及び復号方法
KR100475060B1 (ko) 2002-08-07 2005-03-10 한국전자통신연구원 다시점 3차원 동영상에 대한 사용자 요구가 반영된 다중화장치 및 방법
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US7286689B2 (en) * 2003-06-07 2007-10-23 Hewlett-Packard Development Company, L.P. Motion estimation for compression of calibrated multi-view image sequences
KR20060038408A (ko) * 2003-06-30 2006-05-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 오버컴플릿 웨이브릿 코딩 및 순환성 예측 맵핑을 사용하는비디오 처리를 위한 시스템 및 방법
US7778328B2 (en) 2003-08-07 2010-08-17 Sony Corporation Semantics-based motion estimation for multi-view video coding
CN1212014C (zh) * 2003-08-18 2005-07-20 北京工业大学 基于时空域相关性快速运动估计的视频编码方法
US7613344B2 (en) * 2003-12-08 2009-11-03 Electronics And Telecommunications Research Institute System and method for encoding and decoding an image using bitstream map and recording medium thereof
KR100987775B1 (ko) * 2004-01-20 2010-10-13 삼성전자주식회사 영상의 3차원 부호화 방법
KR100679740B1 (ko) 2004-06-25 2007-02-07 학교법인연세대학교 시점 선택이 가능한 다시점 동영상 부호화/복호화 방법
US7444664B2 (en) * 2004-07-27 2008-10-28 Microsoft Corp. Multi-view video format
US7671893B2 (en) * 2004-07-27 2010-03-02 Microsoft Corp. System and method for interactive multi-view video
KR100584603B1 (ko) * 2004-08-03 2006-05-30 학교법인 대양학원 다시점 영상의 다이렉트 모드 움직임 예측 방법 및 장치
US7924923B2 (en) * 2004-11-30 2011-04-12 Humax Co., Ltd. Motion estimation and compensation method and device adaptive to change in illumination
CN102263962A (zh) * 2004-12-10 2011-11-30 韩国电子通信研究院 对多视图视频进行统一编码的装置
US7468745B2 (en) * 2004-12-17 2008-12-23 Mitsubishi Electric Research Laboratories, Inc. Multiview video decomposition and encoding
US7728878B2 (en) * 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
US7710462B2 (en) * 2004-12-17 2010-05-04 Mitsubishi Electric Research Laboratories, Inc. Method for randomly accessing multiview videos
US8644386B2 (en) * 2005-09-22 2014-02-04 Samsung Electronics Co., Ltd. Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method
KR101276720B1 (ko) * 2005-09-29 2013-06-19 삼성전자주식회사 카메라 파라미터를 이용하여 시차 벡터를 예측하는 방법,그 방법을 이용하여 다시점 영상을 부호화 및 복호화하는장치 및 이를 수행하기 위한 프로그램이 기록된 기록 매체
MY159176A (en) * 2005-10-19 2016-12-30 Thomson Licensing Multi-view video coding using scalable video coding
ZA200805337B (en) * 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
JP5192393B2 (ja) * 2006-01-12 2013-05-08 エルジー エレクトロニクス インコーポレイティド 多視点ビデオの処理
KR100966568B1 (ko) 2006-03-30 2010-06-29 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
WO2008048487A2 (en) * 2006-10-18 2008-04-24 Thomson Licensing Local illumination and color compensation without explicit signaling
KR101395659B1 (ko) * 2007-06-28 2014-05-19 톰슨 라이센싱 다시점 코딩된 영상의 단일 루프 디코딩
US8665958B2 (en) * 2008-01-29 2014-03-04 Electronics And Telecommunications Research Institute Method and apparatus for encoding and decoding video signal using motion compensation based on affine transformation
US8130277B2 (en) * 2008-02-20 2012-03-06 Aricent Group Method and system for intelligent and efficient camera motion estimation for video stabilization

Also Published As

Publication number Publication date
EP2052546A4 (en) 2010-03-03
US20130322536A1 (en) 2013-12-05
KR20090046826A (ko) 2009-05-11
WO2008007913A1 (en) 2008-01-17
US9571835B2 (en) 2017-02-14
JP5021739B2 (ja) 2012-09-12
TWI344792B (en) 2011-07-01
TW200826683A (en) 2008-06-16
WO2008007917A1 (en) 2008-01-17
KR101370919B1 (ko) 2014-03-11
US20090290643A1 (en) 2009-11-26
CN101491096A (zh) 2009-07-22
TW200822755A (en) 2008-05-16
JP2009543508A (ja) 2009-12-03
CN101491096B (zh) 2012-05-30
EP2052546A1 (en) 2009-04-29

Similar Documents

Publication Publication Date Title
TWI344791B (en) A method and apparatus for processing a signal
Sheng et al. Temporal context mining for learned video compression
CN104247432B (zh) 使用深度图估计和更新的高效多视点编码
CN101867813B (zh) 面向交互式应用的多视点视频编码方法
CN108141610B (zh) 用于编码和解码基于光场的图像的方法和设备
CN118018760A (zh) 图像编码和解码的方法和装置以及存储比特流的记录介质
CN110870314A (zh) 用于运动补偿的多个预测器候选
TW200826692A (en) Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
CN104363451A (zh) 图像预测方法及相关装置
CN101540926A (zh) 基于h.264的立体视频编解码方法
TW201313034A (zh) 多視角視訊資料之深度圖的編碼和解碼的方法及其裝置
CN102752588B (zh) 使用空间缩放预测的视频编解码方法
TW200907860A (en) Method and apparatus for block-based digital encoded picture
CN105532004B (zh) 层间视频解码方法及设备
TW200534715A (en) Image encoding apparatus and method, image decoding apparatus and method, and videoing apparatus
WO2020057559A1 (zh) 一种解码、编码方法及其设备
CN111526370A (zh) 视频编码、解码方法及装置和电子设备
KR20180053665A (ko) 광 필드 기반 이미지를 인코딩 및 디코딩하는 방법 및 장치 그리고 대응하는 컴퓨터 프로그램 제품
CN102333221B (zh) 一种全景式背景预测的视频编解码方法
WO2021232979A1 (zh) 视频编解码中的位移矢量预测方法、装置及设备
CN103873867B (zh) 自由视点视频深度图失真预测方法和编码方法
WO2018120420A1 (zh) 一种基于模板匹配的预测方法及装置
Xiang et al. A novel error concealment method for stereoscopic video coding
CN111510726B (zh) 一种编解码方法及其设备
CN100571401C (zh) 确定参考帧的方法及其装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees