[go: up one dir, main page]

TW201136319A - Encoding method, decoding method, encoding device and decoding device - Google Patents

Encoding method, decoding method, encoding device and decoding device Download PDF

Info

Publication number
TW201136319A
TW201136319A TW099126302A TW99126302A TW201136319A TW 201136319 A TW201136319 A TW 201136319A TW 099126302 A TW099126302 A TW 099126302A TW 99126302 A TW99126302 A TW 99126302A TW 201136319 A TW201136319 A TW 201136319A
Authority
TW
Taiwan
Prior art keywords
signal
transform
unit
decoded
output signal
Prior art date
Application number
TW099126302A
Other languages
English (en)
Inventor
Youji Shibahara
Takahiro Nishi
Hisao Sasai
Kyoko Tanikawa
Matthias Narroschke
Virginie Drugeon
Steffen Wittmann
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW201136319A publication Critical patent/TW201136319A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Description

201136319 六、發明說明: 【潑^明所屬戈^技斗軒領超^】 發明領域 本發明係有關於一種編碼方法,其係將聲頻、靜態影 像、及動態影像予以編碼者’尤其本發明係關於一種包含 變換處理之編碼方法’前述變換處理係將輸入訊號從時間 空間域(domain)變換至頻率域(frequency domain)者。
t J 發明背景 為了壓縮聲音資料或動態影像資料,歷來已開發了複 數聲音編碼規格、及動態影像編碼規格。在動態影像編碼 規格的範例中,可舉例有稱為H.26x的ITU-T規格或稱為 MPEG-x的ISO/IEC規格。最新的動態影像編碼規格係稱為 H.264/MPEG-4AVC 之規格。 第1圖係顯示習知編碼裝置16 〇 〇之構成的方塊圖。如第 1圖所示,編碼裝置16〇〇係具備變換部161〇、量子化部 1620、與熵(⑼的㈣編碼部163〇,且以低位元率將聲音資 料或動態影像資料予以編碼者。 變換部1610係將變換輸入訊號從時間空間域變換至頻 率域,來生成已減輕相關的變換輸出訊號,前述變換輸入 訊號係已對各種資料之輸入訊號、或輸入訊號施以某種處 理者。所生成的變換輪出訊號係輸出至量子化部。 量子化部162 0係將已從變換部丨6丨〇輸出的變換輸出訊 號予以量子化’來生成總資料量少的量子化係數。所生成 201136319 的量子化係數係輸出至熵編碼部。 熵編碼部1630係以熵編碼運算法,將已從量子化部 1620輸出的量子化係數予以編碼,來生成已將剩餘的資料 壓縮的編碼訊號。所生成的編碼訊號係例如記錄於記錄媒 體,或透過網路傳輸至解碼裝置等。 以下’詳細説明有關變換部1610所進行的變換處理。 將變換對象訊號(即,變換輸入訊號)之n點向量(η維訊 號)’作為變換輪入(Transform Input)向量χη,輸入至變換部 1610。變換部係對變換輸入向量xn施以預定變換處理(變換 T) ’並將變換輪出(Transform Output)向量yn作為變換輸出 訊號予以輸出(參考式1)。 [數1] (式 1) /=:Γ[χ”] 如式2所示,當變換Τ為線形變換時,變換Τ係可表現為 ηχη正方矩陣之變換矩陣(Transf〇rm Matrix)A與變換輸入向 量X"的矩陣積。而,式3係以變換矩陣A之各元素的變換係 數aik,來算出每—個元素丫|的變換輸出向量y11的算式,可從 式1與式2導出。 [數2] (式 2) 7^"]=办《 [數3] (式3)兄.=艺 變換矩陣A係設計成減輕輸入訊號的相關,以使能量往 4 201136319 文換輸出向里y tl素當中持有小n的元素(所謂的低域側)集 中。對於變換矩陣八的設計,習知有κι;γ(κ—_ ㈣ T晒form : KL轉換)之變換係數導出方法或變換方法。 K LT係基於輸入訊號的統計性質將最佳變換係數予以 ‘出的n 4 H用了導出後最佳變換係數的變換方 法。KLT可完全消除輸入訊號的相關性作為可使能量最 有效率地往低域集中的技術而廣為眾知。 即’ KLT係理想、的變換處理,可用優異的編碼效率來 將藉由KLT所變換的編碼料峨予以編碼。 H考务明内:^L】 發明概要 發明欲解決之課題 但是,對於上述習知技術所示iKLT,有運算量大、 且用於變換之變換矩陣係數的變換係數之資料量多的問 題。具體而言同下述。 如第2圖所示’在存有蝶形構成等高速運算法的 DCT(Discrete Cosine Transform:離散餘弦變換)中,輸入訊 號的維數(以下亦記為輸入點數)為^^時的乘法次數係河乂 LogdM)。對此,在KLT中,乘法次數為ΜχΜ
。例如,DCT
的乘法次數當輸入點數為4點時係8次,而,當輸入點數為8 點時係24次。相對於此,KLT的乘法次數例如當輸入點數 為4點時係16次(DCT比的二倍),當為8點時係64次(Dc丁比 的2.6倍)’而’當為16點時係dCt比的4.〇倍。變換尺寸變 得愈大,則KLT運算量的增加傾向會變得愈顯著,因此KLT 201136319 與DCT相比’有運算量變龐大之課題。 又’在KLT中,基於包含輸入訊號向量χη的集合〜之統 計性質,而導出變換矩陣A。用了變換矩陣A的變換,Λ可對 含於集純的輸人訊號向4χη,施以最佳的無相關化及朝 往低域的能量壓縮。但,當輸人了含於集合SB的輸入訊號 向量時’用了變換矩陣A的變換結果將無法成為最佳,前述 集合SB#持有與設計_設想的集合&相異崎特性者a 若為了經常求算最佳結果,而依每—個輪統 叶性質之些微變化來生錢換係數,駿 = 會變龐大。 W輯頁 所叶算之變換係數而構成的變換矩陣之變換貝 大、且變換係數之資料量很多 二有運异量 蝙碼之際彻KLT。 I難在習知的 爰此,本發明係以提供—種 的,用以解決上述課題者, …柄裝置為目 抑制運算量的增加及變換係數的;=編碼裝置係可 敦率者。再者,本發明係以日° ’並提高編石馬 為目的,其射藉由本發明q種解碼方法及解碼展置 喝過的訊料以正確解碼者/㈣方法及編碼裝置,將編 用以解決課題之手段 為了解決上述課題,本發 含:變換步驟,孫膝^ 心樣的編碼方法包 机號者;量子化步驟,係將前==生成變換輪出 乂換輪出訊號予以量子化, 6 201136319 來生成$子化係數者;及摘編碼步驟,係將前述量子化係 、網’’扁碼來生成編碼訊號者;前述變換步驟包含: 第1變換步驟’係使用第1變換係數,對前述輸人訊號施以 第1又換,來生成第1變換輸出訊號者;及第2變換步驟,係 使用第2’夂換係數’對第】部分訊號施以第2變換,來生成第 2 k換輪出訊號’且將包含所生成的第2變換輸纽號與第2 部分訊號七的前述變換輸出訊號予以輸出者,前述第】部分 訊號係前述第1變換輸出訊號的一部分,前述第2部分訊號 係前^第:變換輸出訊號當中前述第1部分訊號以外的部分, 又^述第2變換步驟中,將前述第—換輸出訊號當中作 為則述第1部分訊號之將成為前述第2變換的對象的範圍、 與前述第2變換係、數之至少—方,在時間或空間上予以適應 性地決定。 依據本構成’對輸入訊號施以第1階段的第1變換,來 生成第1變換輸出訊號’且對為第旧換輸出訊號—部分的 第1部分訊號施以第2階段的第2變換。將為第2變換之對象 的第1部分訊號’較第丨變換輸出訊號在維數呈減低狀態, 因此可削減運算量及削減變換係數的總數。又,藉由第卜變 換與第2變換的二次變換,可進行像將相關減料少的= 換’而可提高編碼效率。再者,由於是適應性地將欲成為 第2變換之對象的範圍與第2變換係數之至少一方予以決 疋’因此可依照輸入訊號’來進行像將相關減得更少的適 當變換。 又’亦可為,前述第2變換步驟中,將前述第(變換輸 201136319 出訊號當中作為前述第1部分訊號之將成為前述第2變換的 對象之範圍、與前述第2變換係數之至少一方,基於預定編 碼參數來予以適應性地決定。 因本構成係將欲成為第2變換之對象的範圍與第2變換 係數之至少一方予以適應性地決定,因此可依照編碼參 數,來進行像將相關減得更少的適當變換。 又,亦可為,前述編碼參數係顯示預先規定之複數預 測方法當中的一個預測方法,而前述編碼方法更包含:編 碼預測步驟,係基於前述編碼參數,生成含於為編碼對象 之輸入影像的編碼對象塊之預測像素者;及差分步驟,係 生成預測誤差影像者,該預測誤差影像係前述編碼對象塊 的像素與前述預測像素的差分;前述第1變換步驟中,將顯 示前述預測誤差影像的訊號,作為前述輸入訊號來進行前 述第1變換。 依據本構成,基於預測方法,可將欲成為第2變換之對 象的範圍與第2變換係數之至少一方予以適應性地決定。預 測方法係依照輸入訊號的特徵而決定的參數,因此可依照 輸入訊號,對像將相關減得較少的範圍施以第2變換。 又,亦可為,前述第2變換步驟中,當前述編碼參數顯 示之預測方法係顯示對預定方向之外插者時,將構成前述 第1變換輸出訊號之複數係數値當中包含前述預定方向的 係數値之範圍,決定為前述第2變換的對象。 依據本構成,可因應外插方向來決定第2變換的對象。 由於可藉由外插方向推測功率(power)的集中部分,因此可 201136319 對像將相關減得較少的範圍施以第2變換。 又,亦可為,前述第2變換步驟中,前述方向為大致水 平方向時,將構成前述第1變換輸出訊號之複數係數値當中 包含横方向的係數値之範圍,決定為前述第2變換的對象。 依據本構成,外插於水平方向時,可推測功率集中於 左側,因此將左側係數値設為第2變換的對象,可將相關減 得較少。 又,亦可為,前述第2變換步驟中,前述方向為大致垂 直方向時,將構成前述第1變換輸出訊號之複數係數値當中 包含縱方向的係數値之範圍,決定為前述第2變換的對象。 依據本構成,外插於垂直方向時,可推測功率集中於 上側,因此將上側係數値設為第2變換的對象,可將相關減 得較少。 又,亦可為前述編碼參數係從複數變換矩陣之中指定 一個變換矩陣的索引資訊,前述複數變換矩陣係具有彼此 相異之係數値之組者,前述第2變換步驟中,將藉由前述編 碼參數所指定的變換矩陣決定為前述第2變換係數。 依據本構成,將複數索引與複數變換矩陣預先加以對 應,可從複數變換矩陣之中,將較適當的變換矩陣作為第2 變換係數而予以採用。 又,本發明之一態樣的解碼方法包含:熵解碼步驟, 係將編碼訊號予以熵解碼,來生成解碼量子化係數者;逆 量子化步驟,係將前述解碼量子化係數予以逆量子化,來 生成解碼變換輸出訊號者;及逆變換步驟,係將前述解碼 201136319 變換輪出訊號予以逆變換,來 換步顿包含:第2逆變換 石馬訊號者;前述逆變 -解碼變換輸出訊號施以逆變換係數,對 訊號’前述第2解碼變換輪出、纟成第1解碼部分 的-部分者;及第以變換牛述解碼變換輪出訊號 對包含前述第鑛用第1逆變換係數, ㈣換輪出訊號施·逆變換、,來的第1解 她解料分城㈣述解 :號,前 解碼變換輪出訊號以外的部 、輪^號Η前述第2 中,將前述解碼變換輪出訊號當中二變換步驟 出訊號之將成為前述第2逆變 為4第2解碼變換輸 逆變換係數之至少_方 、之對象的範圍、與前述第2 定。 ’在時間或空間上予以適應性地決 號予量與少變換魏,將編竭訊 輪出:號:::二逆變換步驟中,將前述解碼變換 述第2逆變換之對象訊狀將成為前 —方,基於預定編Μ = 第2逆變換係數之至少 又亦 …/數予以適應性地決定。 1前述_::=:==像:訊 ==預先規定之複數預測方法當中:一個二 預測㈣ΓΓΓΠ财Γ54㈣枝u含:料 、土 m多數’生成含於前述預測誤差 201136319 影像的解碼對象塊之預測像素者;及加法步驟,係將前述 解碼對象塊的像素與前述預測像素累加,來還原前述輸入 影像者。 又,亦可為,前述第2逆變換步驟中,當前述編碼參數 顯示之預測方法係顯示往預定方向之外插者時,將構成前 述解碼變換輸出訊號之複數係數値當中包含前述預定方向 的係數値之範圍,決定為前述第2逆變換的對象。 又,亦可為,前述第2逆變換步驟中,前述方向為大致 水平方向時,係將構成前述解碼變換輸出訊號之複數係數 値當中包含横方向的係數値之範圍,決定為前述第2逆變換 的對象。 又,亦可為,前述第2逆變換步驟中,前述方向為大致 垂直方向時,係將構成前述解碼變換輸出訊號之複數係數 値當中包含縱方向的係數値之範圍,決定為前述第2逆變換 的對象。 又,亦可為,前述編碼參數係從複數變換矩陣之中指 定一個變換矩陣的索引資訊,前述複數變換矩陣係具有彼 此相異之係數値之組者,前述第2逆變換步驟中,係將由前 述編碼參數所指定的變換矩陣,決定為前述第2逆變換係 數。 在以上任一解碼方法中,亦與編碼方法時一樣,可抑 制運算量的增加及變換係數的資料量增加。又,藉由上述 編碼方法,可將編碼過的訊號予以正確解碼。 而,本發明不僅是可作為編碼方法及解碼方法予以實 201136319 現,亦可作為具備處理部之編碼裝置及解碼裝置予以實 現,前述處理部係進行含於該編碼方法及解碼方法的處理 步驟者。又,亦可作為使電腦執行該等步驟的程式而予以 實現。再者,亦可作為記錄有該程式之電腦可讀取的 CD-ROM(Compact Disc-Read Only Memory)等記錄媒體,並 且,亦可實現為顯示該程式的資訊、資料或訊號來予以實 現。而且,那些程式、資訊、資料及訊號亦可透過網際網 路等通訊網路來輸送。 又,構成上述各編碼裝置及解碼裝置的構成要素之一 部分或全部’係從一個系統LSI(Large Scale Integration :大 規模積體電路)所構成亦可。系統LSI係於一個晶片上集積 複數構成部所製造成的超多機能LSI,具體上為含有微處理 機、ROM及RAM(Random Access Memory)等而構成之電腦 系統。 發明效果 依據本發明,可抑制運算量的增加、及變換係數的資 料量增加,而可提高編碼效率。 圖式簡單說明 第1圖係顯示習知編碼裝置構成的方塊圖。 第2圖係顯示DCT與KLT的運算量之比較之圖。 第3圖係顯示本發明實施形態1之編碼裝置構成之-例 的方塊圖。 第4圖係顯示本發明實施形態1之變換處理之-例的流 程圖。 12 201136319 第5 A圖係將本發明實施形態1之變換部的資料流之一 例予以概念性顯示之圖。 第5 B圖係將本發明實施形態1之變換部的資料流之其 他一例予以概念性顯示之圖。 第6圖係顯示本發明實施形態1之變換處理之其他一例 的流程圖。 第7圖係將本發明實施形態1之變換部中變換係數之導 出之一例予以概念性顯示之圖。 第8圖(a)、(b)係將本發明實施形態1之矩陣運算之一例 予以概念性顯示之圖。 第9圖係顯示本發明實施形態1之變形例的編碼裝置構 成之一例的方塊圖。 第10圖係顯示本發明實施形態1之變形例的編碼裝置 運行之一例的流程圖。 第11A圖係顯示本發明實施形態2之解碼裝置構成之一 例的方塊圖。 第11B圖係顯示本發明實施形態2之解碼裝置中逆變換 部構成之一例的方塊圖。 第12圖係顯示本發明實施形態2之解碼裝置運行之一 例的流程圖。 第13 A圖係將本發明實施形態2之逆變換部的資料流之 一例予以概念性顯示之圖。 第13 B圖係將本發明實施形態2之逆變換部的資料流之 其他一例予以概念性顯示之圖。 13 201136319 第14圖係顯示本發明實施形態2之逆變換處理之一例 的流程圖。 第15圖係顯示本發明實施形態2之變形例的解碼裝置 構成之一例的方塊圖。 第16圖係顯示本發明實施形態2之變形例的解碼裝置 運行之一例的流程圖。 第17圖係顯示本發明實施形態3之編碼裝置構成之一 例的方塊圖。 第18圖係顯示本發明實施形態3之編碼裝置運行之一 例的流程圖。 第19圖係顯示本發明實施形態3之變換部構成之一例 的方塊圖。 第20圖係顯示本發明實施形態3之變換部構成之其他 一例的方塊圖。 第21圖係將本發明實施形態3之變換部中變換係數之 導出之一例予以概念性顯示之圖。 第22圖係顯示本發明實施形態3之變形例的變換部構 成之一例的方塊圖。 第23圖係顯示本發明實施形態3之變形例的編碼裝置 構成之一例的方塊圖。 第2 4 A圖係顯示本發明實施形態3之變形例的編碼裝置 構成之一例的方塊圖。 第2 4 B圖係顯示本發明實施形態3之變形例的編碼裝置 構成之一例的方塊圖。 14 201136319 第25圖係顯示在本發明實施形態3之變形例的編碼裝 置中,已儲存於記憶體之第2變換係數與分割統合資訊的對 應關係之一例之圖。 第2 6 A圖係將本發明實施形態3之第}變換輸出訊號, 與,第1部分訊號及第2部分訊號的關係予以概念性顯示之圖。 第26B圖係將本發明實施形態3之分割統合資訊之—例 予以概念性顯示之圖。 第2 6 C圖係將本發明實施形態3之分割統合資訊之—例 予以概念性顯示之圖。 第2 7圖係顯示本發明實施形態4之解碼裝置構成之— 例的方塊圖。 第28圖係顯示本發明實施形態4之解碼裝置運行之— 例的流程圖。 第2 9圖係顯示本發明實施形態4之逆變換部構成之一 例的方塊圖。 第3 〇圖係顯示本發明實施形態4之變形例的解碼裝置 構成之一例的方塊圖。 第31圖係顯示本發明實施形態4之變形例的解碼裝置 構成之一例的方塊圖。 第32圖係顯示本發明實施形態5之變換部構成之一例 的方塊圖。 第3 3圖係將本發明實施形態5之變換部中變換係數之 導出予以概念‘_示之圖。 第34圖位如, φ 具不本發明實施形態5之變形例的變換部構 15 201136319 成之一例的方塊圖。 第35圖係顯示本發明實施形態5之變形例的變換部構 成之一例的方塊圖。 第36圖係顯示本發明實施形態6之逆變換部構成之一 例的方塊圖。 第37圖係顯示本發明實施形態6之變形例的逆變換部 構成之一例的方塊圖。 第3 8圖係顯示本發明實施形態6之變形例的逆變換部 構成之一例的方塊圖。 第3 9圖係將本發明實施形態7之變換部的資料流之一 例予以概念性顯示之圖。 第40圖係將本發明實施形態7之分離型構成之第2變換 的資料流之一例予以概念性顯示之圖。 第41圖係將本發明實施形態7之多維變換輸入訊號為 YUV訊號時的資料流之一例予以概念性顯示之圖。 第4 2圖係將本發明實施形態7之多維變換輸入訊號為 在空間上相鄰接之區塊訊號時的資料流之一例予以概念性 顯示之圖。 第4 3圖係將本發明實施形態8之逆變換部的資料流之 一例予以概念性顯示之圖。 第4 4圖係將本發明實施形態8之逆變換部的資料流之 一例予以概念性顯示之圖。 第4 5圖係將本發明實施形態8之多維解碼變換輸出訊 號為Y U V訊號時的資料流之一例予以概念性顯示之圖。 16 201136319 第46圖係將本發明實施形態8之多維解碼變換輪出訊 號為在空間上相鄰接之區塊訊號時的資料流之一例予以概 念性顯示之圖。 第47圖係將本發明實施形態9之變換部的資料流之一 例予以概念性顯示之圖。 弟48A圖係顯示本發明實施形態9之變換處理之一例的 流程圖。 弟48B圖係顯示本發明實施形態9之變換處理之一例的 流程圖。 第49圖係顯示本發明實施形態9之變形例的變換處理 之一例的流程圖。 第50圖係顯示本發明實施形態9之變形例的變換處理 之一例的流程圖。 第51A圖係顯示本發明實施形態1 〇之逆變換處理之一 例的流程圖。 第51B圖係顯示本發明實施形態10之逆變換處理之一 例的流程圖。 第52圖係顯示本發明實施形態1 〇之變形例的逆變換處 理之一例的流程圖。 第53圖係顯示本發明實施形態丨〇之變形例的逆變換處 理之一例的流程圖。 第54A圖係顯示本發明實施形態〖1之編碼裝置構成之 一例的方塊圖。 第54B圖係顯示本發明實施形態丨丨之編碼裝置中每一 17 201136319 訊號的處理差異之一例之圖。 第55A圖係顯示本發明實施形態12之解碼裝置構成之 一例的方塊圖。 第55B圖係顯示本發明實施形態12之解碼裝置中每一 訊號的處理差異之一例之圖。 第5 6 A圖係顯示本發明實施形態13之變換矩陣之一例 之圖。 第5 6 B圖係顯示本發明實施形態13之絕對平均値之一 例之圖。 第56C圖係顯示本發明實施形態13之標頭(header)記述 値(即,差分)之一例之圖。 第5 6 D圖係顯示本發明實施形態13之第2變換矩陣之一 例之圖。 第5 6 E圖係顯示本發明實施形態13之上三角元素與下 三角元素之間符號關係之圖。 第5 6 F圖係顯示本發明實施形態13之變換矩陣之一例 之圖。 第57A圖係顯示本發明實施形態14的變換及量子化的 計時圖(timing chart)之一例之圖。 第5 7 B圖係顯示本發明實施形態14的變換及量子化的 計時圖之一例之圖。 第5 8 A圖係顯示本發明實施形態15的逆量子化及逆變 換的計時圖之一例之圖。 第5 8 B圖係顯示本發明實施形態15的逆量子化及逆變 18 201136319 換的計時圖之一例之圖。 苐59圖係將内容遞送服務(cont;ent; delivery service)予 以實現之内容供給系統的全體構成圖。 第60圖係數位播放用系統的全體構成圖。 第61圖係顯示手機外觀之圖。 第62圖係顯示手機構成例的方塊圖。 第63圖係顯示電視構成例的方塊圖。 第64圖係顯示對光碟之記錄媒體進行資訊讀寫的資訊 再生/記錄部之構成例的方塊圖。 第65圖係顯示磁碟之記錄媒體構造例之圖。 第6 6圖係顯示將各實施形態的動態影像編碼方法及動 悲影像解碼方法予以實現之積體電路構成例的方塊圖。 C實施方式:J 用以實施發明的形態 以下’一邊參考圖式一邊説明本發明之實施形態。
(實施形態U 本發明實施形態1之編碼裝置具備下列三部,即:變換 部’係將輸入訊號予以變換,來生成變換輸出訊號者;量 子化部’係將前述變換輸出訊號予以量子化,來生成量子 化係數者;及熵編碼部,係將前述量子化係數予以熵編碼, 來生成編碼訊號者。而且,變換部具備下列二部,即:第1 變換部,係以由第1變換係數構成之第丨變換矩陣,對輸入 訊號施以第1變換來生成第1變換輸出訊號者;及第2變換 部,係以由第2變換係數構成之第2變換矩陣,對第丨部分訊 19 201136319 號施以第2變換來生成第2變換輸出訊號,且將包含所生成 的第2變換輪出訊號與第2部分訊號之前述變換輸出訊號予 以輸出者,前述第1部分訊號係第1變換輸出訊號的一部 刀而則述第2部分訊號係第1變換輸出訊號當中第丨部分訊 號以外的部分。 換舌之,本發明實施形態丨之編碼裝置,其特徵在於對 輸入》孔號;以二階段變換。具體而言,本發明實施形態1之 、’扁碼衷置,其特徵在於對輸入訊號施以第丨變換,並對第1 部分訊號施以第2變換,前述第1部分訊號係第1變換後之訊 號的一部分。 而,在本說明書中,變換矩陣與變換係數有時幾乎作 為同義來使用。 而如用於蝶形構成或位移(shift)與加法的運算之構 成,即便是非以單純矩陣運算即可實現之變換,在本說明 曰中有時仍會以矩陣表現來記述。如此一來,以矩陣表現 來°己述並非是將已將蝶形構成、使用位移與加法的運算 之構成、或使用提升結構(lifting structure)之構成等各種運 算量減輕後之變換予以除外者。 第3圖係顯示本發明實施形態丨之編碼裝置ι〇〇構成之 一例的方塊圖。如第3圖所示,編碼裝置1〇〇具備變換部 11〇、量子化部12〇、與熵編碼部130。 變換部110係將輸入訊號予以變換(變換輪入訊號)來生 成變換輸出訊號。如第3圖所示,變換部110具備第丨變換部 2〇〇、分割部210、第2變換部220、與統合部23〇。 20 201136319 第1變換部2 00係以第丨變換矩陣對變換輸入訊號施以 第1變換’來生成第1變換輸出訊號。 分割部210係將第丨變換輸出訊號分割成二個部分。具 體而言,分割部210係以分割統合資訊,將藉由第丨變換部 200所生成的第1變換輸出訊號,分割成第丨部分訊號與第2 部分訊號。而,分割統合資訊係顯示第丨部分訊號對應於第 1變換輸出訊號的哪一部分之選擇範圍資訊之一例。 第2變換部2 2 0係以第2變換矩陣對第〖部分訊號施以第 2變換,來生成第2變換輸出訊號。 統合部230係以將第2變換輸出訊號與第2部分訊號予 以統合’來生成變換輸出訊號。 關於上述變換部110所具備的各處理部之詳細運行,爾 後予以説明。 量子化部120係將藉由變換部丨10所生成的變換輸出訊 號予以量子化’來生成量子化係數。 燏編碼部130係將藉由量子化部120所生成的量子化係 數予以熵編碼’來生成編碼訊號。 而,將聲音資料、靜態影像資料、動態影像資料等各 種資料之輸入訊號,作為編碼對象訊號輸入至編碼裝置 100。並將編碼對象訊號(Original Signal)或預測誤差訊號, 作為變換輸入訊號輸入至變換部110 ’前述預測誤差訊號係 基於該編碼對象訊號與以前所輸入之編碼對象訊號所作成 的預測訊號之差分。一般而言’多半是將預測誤差訊號作 為變換對象來輸入,但在設想傳送路中會混入誤差故而不 21 201136319 進行預測的情況、或者在能量很小的情況下反不進行預 測’而疋將輸入訊號作為變換對象來輸入。此種變換輸入 (Transform Input)訊號係如以式4所示之向量xn表示。 [數4] (式 4) x"=(w,.._,x"y 接著,説明本發明實施形態丨之編碼裝置丨〇〇運行之一例。 第4圖係顯示本發明實施形態丨之編碼裴置1〇〇運行之 -例的流程圖。又,第5A圖及第5B圖係將本發明實施形態 1之編碼裝置100中變換部丨1〇的資料流之一例予以概念性 顯示之圖。 首先,變換部110係將變換輸入訊號/予以變換,來生 成變換輸出訊號乂"(步驟S110)。 具體而言,首先,第丨變換部2〇〇以第丨變換矩陣對變換 輸入訊號?施以第i變換,來生成第】變換輸出訊號^(步驟 SU2)。具體而言,第i變換部細係將變換輸入訊號^的相 關予以減輕,並使能量集中於低頻帶域,來將變換輸入訊 號乂"變換成第1變換輸出訊號y|n。 此時,作為用於第1變換之第丨變換係數,例如可使用 在以前所輸入之變換輸入訊號/的第丨變換時既已算出來 之係數。即,每當進行第1變換時不算出第遷換係數亦可, 因此可減低消耗在第i變換係數之算出的運算量。關於算出 第1變換係數時的具體處理,爾後予以説明。 其次’分割部210係將第1變換輸出訊號y"分割成第! 部分訊號yILm與第2部分訊號yiHn-m(步驟SU4)。具體而言, 22 201136319 分割部210係基於分割統合資訊,以使第1部分訊號y I Lm的相 關能量會變得比第2部分訊號的相關能量大的方式, 將第1變換輸出訊號y|n予以分割。 分割統合資訊係指使分割部210執行分割控制之資 ’即,將低頻帶域作為第1部分訊號y1Lm予以分割,而將 高頻帶域作為第2部分訊號yiH-n予以分割。分割統合資訊 亦可是指示之資訊,即,依照輸入將能量大的成分往第1部 分訊號y1Lm’且,將能量小的成分往第2部分訊號地來 機動性地進行控制。 此時’作為分割統合資訊,例如,可使用在以前所輸 入之第1變換輸出訊號yin的分割時既已決定之分割統合資 5fl°即’無須在每當進行分割時,來決定新的分割統合資訊。 如第5Α圖所示,藉由分割部210所分割的第1部分訊號 ya ’係更換排列成—維而輸入至第2變換部22〇。 其次,第2變換部220係以第2變換矩陣對第1部分訊號 y1L施以第2變換,來生成第2變換輪出訊號y2m(步驟 S116)。具體而言,第2變換部22〇係將第i部分訊號力:的相 關減輕,並使能量集中至較低頻帶域,來將第1部分訊號…^ 變換成第2變換輸出訊號y2m。 卜此時,作為第2變換係數,例如可使用在以前所輸入之 第1部分訊號y1Lm的第2變換時既已算出來之係數。即,每當 進行第2變換時不算出第2變換係數亦可,因此可減低消耗 在第2變換係數之算出的運算量。關於算出第2變換係數時 的具體處理,爾後予以説明。 23 201136319 其次,統合部230係將第2變換輸出§孔號丫2與弟2部分 訊號ym11·'11予以統合,來生成變換輸出訊號/(步驟S118)。 具體而言,統合部230係將第2變換輸出訊5虎丫2更換排列成 在更換排列成一維以前之維,益基於分割統合資況’將更 換排列後的第2變換輸出訊號y2m與第2部分訊號y mn-m予以 統合。 其次,量子化部120係將如上述所生成的變換輸出訊號 yn予以量子化,來生成量子化係數(步驟si2〇)。最後,熵編 碼部130係將量子化係數予以熵編碼,來生成編碼訊號(步 驟S130)。 而’如第5B圖所示,分割部210未將第1部分訊號y1Lm 更換排列成一維,而原封不動地輸出至第2變換部220亦 可。此時’第2變換部220係對二維的第1部分訊號yiLm施以 第2變換,來生成二維的第2變換輸出訊號y2m。在此,第2 變換部220係進行例如非分離型第2變換。而且,在統合部 230令’並未進行第2變換輸出訊號y2m的更換排列,就將第 2變換輸出訊號乃"1與第2部分訊號y,Hn_m予以統合。 第又,第5A圖及第5B圖中,第2變換對象係圖示成猶如 此' \輪出。孔说的任意區域(非長方形區域),但並非限於 示之為長方形區域亦可。具體而言,在第5A圖及第5B圖顯 方形。U中,第2變換部220係將含於經矩陣表現後的非長 述气Γ域内之讯號,作為第1部分訊號來進行第2變換,前 此^包含第1變換輪出訊號的低頻成分係數値者。對 ’第2變肩切祕料祕的長㈣區域内之 24 201136319 訊號,作為第1部分訊號來進行第2變換亦可,前述訊號係 包含第1變換輸出訊號的低頻成分係數値者。 其次,説明決定第1變換係數、第2變換係數及分割統 合資訊時的運行及構成。 第6圖係本發明實施形態1之變換部11 〇中變換處理之 一例的流程圖。又,第7圖係顯示本發明實施形態丨之變換 部110中變換係數之導出之一例的概念圖。 如第7圖所示,變換部110還具備第丨變換係數導出部 202、與第2變換係數導出部222。而,於第7圖中未將分割 部210及統合部230予以圖式。 首先,如第6圖所示,第!變換係數導出部2〇2係基於變 換輸入sfl號xn來決定第1變換係數(步驟s丨丨丨)。其次,第上 變換部200係以第1變換矩陣對變換輸入訊號xn施以第1變 換(步驟S112)’前述第1變換矩陣係以藉由第丨變換係數導出 部202所決定之第1變換係數而構成。 其次,決定分割統合資訊(步驟8113)1}若分割統合資訊 為使進行預先所決定之分割而控制分割部21〇者’則從編碼 裝置100的記憶體等予以讀出。又,若分割統合資訊為使進 行因應於第1變換輸出訊號y广之分割而控制分割部2丨〇者, 則基於第1變換輸出訊號Υ|η並參考能量狀態之分布來將分 割統合資訊予以導出。 基於如此所決定之分割統合資訊,分割部2丨〇將第i變 換輸出訊號yin予以分割(步驟SU4)。 其次,第2變換係數導出部222係基於第丨部分訊號…: 25 201136319 來決定第2變換係數(步驟S115)。其次,第2變換部22〇係以 第2變換矩陣對第1部分訊號yin施以第2變換(步驟Si⑹,前 述第2變換矩陣係以所決定的第2變換係數而構成。 最後,統合部230係將第2變換輸出訊號y2m,與已分割 的第2#刀》虎y1H〒以統合,並作為變換輪出訊號〆來輪 出(步驟S118)。 利用第7圖來詳細説明第1變換部200之第!變換、與第2 變換部220之第2變換。 在包含许多樣本的某集合〜中,包含有輸入於第i變換 部200的變換輸人訊號^ 變換係數導出部2Q2,例如係 以KLT,來求出平均上已最佳化到含於該集合^之許多樣 本的第1變換係數。 如此一來’由於基於包含許多樣本的集合SA來求出幻 變換係數,因Μ太受各個變換輸人訊的統計性質影 響’即便為多少相異的性f,亦可利用由同第i變換係數構 成之第1變換矩陣來進行第i變換。於是,可抑制第i變換係 數的更新頻率,gp ’如同第4圖顯示之處理,可增加不施行 決定第1變換係數之情況,因此可削減運算量。 又,即便在進行^變換係數的更新時,由於更新前與 後之變換係數的各個狀變化量D、,因此可減少差分資 訊量。因曰此’在將第職係數傳輸至解料置時,^制 代碼數量(code amount)的增加。 26 201136319 關能量大的部分。第2變換係數導出部222,與第丨變換係數 導出部202-樣,例如係以KLT求出第2變換係數,該第螬 換係數為包含第丨部分鮮uy,,且平均±已最佳化到含於 集合Sc之樣本者,該集合Se與集合&相比,樣本數較少。 士此來,令集合心為比集合SA較小之集合,可敏銳 地追蹤所輸入之第丨變換輸出訊號y|n的統計性質之變化,亦 可達成更進一步的相關減輕與能量壓縮。而,設為小集合 Sc,雖可使變換係數的更新頻率提高,但由於第丨部分訊號 yILm係第1變換輸出訊號yin的一部分,且較變換輸入訊號χΠ 維數為少,因此第2變換矩陣的元素數會變少,而可同時達 成高效率變換、與運算量及資料量的削減。 而,先箣令於第2變換部220輸入構成第1變換輸出訊號 y!n之係數値當中為相關能量大的部分之第1部分訊號 y1Lm,此可說是選擇了第1變換輸出訊號Yln之高自相關的位 置。對此,作為類似方法,亦可將第丨變換輸出訊號yi„之高 相互相關的位置選擇為第1部分訊號y|Lm。 而’先前雖令分割部210與統合部230,分別對第丨部分 訊號yiL與第2變換輸出訊號y,施以維之更換排列,但亦可 為第2變換部220進行各個更換排列之構成。又,當編碼對 象為聲音資料等一維訊號’或,在可視為一維訊號處理之 分離型的各維處理中,由於輸入變換部110的變換輸入訊號 χη為一維,因此不需要該等更換排列的處理。 如上述,本發明實施形態1之編碼裝置1〇〇,其特徵在 於對輸入訊號施以第1變換,並對為第1變換後訊號一部分 27 201136319 的第1部分訊號施以第2變換。藉此,依據本發明實施形態1 之編碼裴置1〇〇,在使用基於輸入訊號的統計性質所計算之 ‘變換係數的變換中,可實現削減變換的運算量、及削減變 換矩陣的元素數(資料量)。 而’在上述實施形態1之編碼裝置1〇〇中,將第1變換輸 出訊號ΥΓ分割成第1部分訊號y1Lm與第2部分訊號,並 於第2變換後予以統合,但非於明示性分割亦可,只要是實 备上分割即可。即,第1變換輸出訊號y|n當中,只要決定將 成為執行第2變換之對象的部分即可。例如,第2變換之際, 對無法成為第2變換對象之元素的行,設其對角元素為j、 °又非對角元素為0,則可實質上僅對第丨部分訊號施以第 2變換。第8圖顯示矩陣運算的具體例。 如第8圖(a),對4點向量Xn當中的3點(Χι , &,χ3)乘上 3幻^小的矩陣a3所得的結果,與,如第8圖沙),擴充後矩 陣與4點χ之3點部分的乘法結果一致,其中擴充後矩陣 A4係將A〕擴充至4x4,並於擴充之際將對角元素設定為i、 非對角元素設定為0者。 第9圖係本發明實施形態丨之變形例的編碼裝置論構 成之一例的方塊圖。 編碼裝置議具備變換部llQa、量子化和q、與烟編 ^130。而,對於與第3圖顯示之編碼襄置進行同運行 、处里。p,予以附加同標被,而於下省略説明。 變 在不具備 變換物a具備第1變換部2⑻與第2變換部馳。即, 部U〇a與第3圖顯示之變換部U0相較之τ, 28 201136319 分割部210與統合部230之點上,且具備第2變換部220a來取 代第2變換部220之點上,彼此相異。 第2變換部220a係以第2變換矩陣對第1部分訊號y n m施 以第2變換,來生成第2變換輸出訊號y2m,前述第2變換矩 陣係由基於包含第1部分訊號y, L m之集合的統計特性所決定 之第2變換係數而構成,前述第丨部分訊號yiLm係第丨變換輸 出訊號yT的一部分。具體而言,第2變換部220a係於構成第 1變換輸出訊號yin之係數値當中,將欲成為第2變換對象之 係數値予以決定’並將由決定後的係數値構成之訊號設為 第1部分訊號y1Lm,來進行第2變換。較具體而言,第2變換 部220a係於構成第1變換輸出訊號γι"之複數係數値當中,將 包含較預定臨界值值為大的係數値之訊號,設為第1部分訊 號yiLm,來進行第2變換。 而且,第2變換部220a將包含所生成的第2變換輸出訊 號y/與第2部分訊號yiHn-m的變換輸出訊號/予以輸出,前 述第2部分訊號y 1Hn ·m係第1變換輸出訊號y,n當中第1部分訊 號yiLm以外的部分。 第10圖係顯示第9圖顯示之編碼裝置100a運行之一例 的流程圖。 首先’變換部ll〇a係將已輸入之變換輸入訊號xn予以 變換’來生成變換輸出訊號yn(步驟SllOa)。具體而言,首 先’第1變換部200係對已輸入之變換輸入訊號xn施以第1變 換,來生成第1變換輸出訊號yin(步驟S112)。 其次’第2變換部220a對第1部分訊號y1Lm施以第2變換 29 201136319 (步驟S116a)。例如’第2變換部22〇a係將於第1變換輸出訊 號當中將成為進行第2變換對象之部分,決定為第丨部分 訊號yILm,並以第2變換_ ’對所決定之第〖部分訊號^ 施以第2變換。 具二人,直千化。旧係將包含第2變換輸出訊號<的璧 換輸出tfi號ymm生成量子化係|tcn(步專 sno)。最後,麟卿no係將量子化錄cn予以摘編碼 來生成編碼訊號(步驟S130)。
如上述,實施形態例的編碼裝置跡亦是局名 性進行二階段變換,而可抑制編碼處理之運算量增加、} 變換係數的資料量增加。 S (實施形態2) 本發明實施形態2之解碼裝置具備下列三部即:辦 碼部,係⑽碼訊舒以_碼,來生成解料子化例 t逆量子化部’健前述解碼量子化係數予以逆量子化 及逆變換部,係將― 交7兴勒出&fL 于以逆變換,來生成解馬 、 變換部具備下列二部,即:第2逆變換部,〜而且、1 換係數構成的第2逆變換矩陣,對=,’、以由第2逆1 以第w η 早對第2解碼變換輸出訊· Μ第2逆.祕,來生成第!解碼部 〜 換輸出訊號係解碼變換輸出訊號」⑴述第2解碼1 部,係以由第1逆變換係數構成的第及第1逆《 訊號,施以第1逆變換來生成解顺2第1解碼變換㈣ 凡唬者,剛述第2解碼名 30 201136319 分訊號係解碼變換輸出訊號當中第2解碼變換輸出訊號以 外的部分。 換言之’本發明實施形態2之解碼裝置,其特徵在於對 編碼訊號施以二階段的逆變換。具體而言,本發明實施形 態2之解糾置,其⑽在於對第2_變換㈣訊號施以 第2逆變換’並對包含第2逆變換後的訊號與第2解碼部分訊 號的第1解碼變換輸出訊號,施以逆變換,前述第2解碼 變換輸出訊號係對編碼訊號施以熵解碼及逆量子化而生成 的解碼變換輸出訊號之-部分,前述第2解碼部分訊號係解 碼變換輸出訊號的剩餘部分。 第11A圖係本發明實施形態2之解瑪裂置3崎成之— 例的方塊圖。將以低位⑼將聲音f料或動態影像資料予 以編碼後的編碼訊號,輸入至解碼裝置3〇〇,且,解碼裝置 3_從編碼訊號將聲音資料杨態影像f料予以解碼,來 生成解碼訊號。 解碼裝置300係對編碼訊號施f與編碼處理幾乎成 相反的-烟解碼、逆量子化、逆變換的處理。如第 不,解碼裝置300具備熵解碼部3ln、 變換部330。 &子化部32〇'與逆 、、解碼部31G係將已輸人之編碼訊號予以嫡解碼 ^解碼量子化係數鋼量子化係數係相當於實施形態々 里子化部120生成的置子化係數。 逆量子化部320係將藉由網解 子化传+ 所生成的解碼量 于化係數予以逆篁子化,來峰士知成 生成解碼變換輪出訊號。解碼 31 201136319 變換輸出訊號係相當於實施形態丨之變換部11〇生成的a 輸出訊號。 免換 逆變換部330係將藉由逆量子化部32〇所生成的解碼缴 換輸出訊號予以逆變換,來生成解碼訊號。解碼訊號係^ 當於輸入至實施形態丨之變換部11〇的變換輸入訊號。’、 以下,詳細説明本發明實施形態2之逆變換部33〇。 11B圖係本發明實施形態2之解碼裝置300中逆變換部33〇f 成之-例的方塊圖。如第11B圖所示,逆變換部33()具備^ 割部400、第2逆變換部、統合部42〇、與第i逆變^ 430。 吳 分割部400係將解碼變換輪出訊號分割成二個部分。具 體而5,分割部400係以分割統合資訊,將藉由逆量子化^ 320所生成的解碼變換輸出訊號,分割成第梅碼變換^ 訊號與第2解碼部分訊號。 第2解碼變換輸出訊號係相當於藉由實施形態ι之第2 變換部220所生成的第2變換輪出訊號。即,第埤碼變換輪 出訊號,在編碼之際’係相當於第2賴所執行的部分,: 成為第2逆變換對象的部分。又,第2解碼部分訊號係相告 於藉由實施形態1之分割部210所分割的第2部分訊號〇田 第2逆變換部410係對第2解碼變換輸出訊號施以第 變換,來生成第1解碼部分錢。第1解碼部分訊號係相杏 於藉由實施形態1之分割部210所分割的第旧分訊號〇 " 統合部420係將藉由第2逆變換部_所生成的第!解碼 部分訊號、與第2解碼部分訊號予以統合來生成第丄解碼 32 201136319 =換輸出訊號。第丨解碼變換輪出訊號係相當於藉由實施形 心1之第1變換部2〇〇所生成的第丨變換輸出訊號。 第1逆艾換部43〇係以第丨逆變換矩陣,對第1解碼變換 輸出訊號施以心逆變換,來生成解碼訊號。第丨解碼變換 輸出訊號係包含第2解碼變換輸出訊號與第2解碼部分訊號 之訊號。 ; “而,將聲音資料、靜態影像資料、動態影像資料等各 ”料之Λ號予以編碼所生成的編碼訊號,輸入解碼裝置 3〇〇。而將該編碼訊號予以熵解碼且逆量子化所生成之訊 號,作為解碼變換輸出訊號yAn輸入逆變換部330。在此,記 说「(hat)」係顯示分別附於正前方文字上的記號,在本說 明書中,以下,以同意思使用記號「A(hat)」。 接著’説明本發明實施形態2之解碼裝置3〇〇運行之一例。 第12圖係顯示本發明實施形態2之解碼裝置3〇〇運行之 :例的流程圖。又’第13A圖及第13B圖係將本發明實施形 態2之解瑪裝置中逆變換部3 3 〇的資料流之—例予以概 念性顯示之圖。 首先,熵解碼部310係將編碼訊號予以熵解碼,來生成 解=量子化佩(倾賴)。其次,逆量子化部則系將解 碼S子化係數予以逆量子化,來生成解碼變換輸出訊號 Υ Π(步驟S220)。 其次’逆變換部3 3 0係將解碼變換輸出訊號y △ n予以逆變 換’來生成解碼訊號χΛη(步驟S23〇)e 具體而吕,首先’分割部4〇〇基於分割統合資訊,將解 33 201136319 碼變換輸出訊號yAn分割成二個區域(步驟S232)。即,分割 部400將解碼變換輸出訊號/n分割成第2解碼變換輸出訊號 y ’與第2解碼部分訊號。第2解碼變換輸出訊號// 係構成解碼變換輸出訊號/η之複數係數値當中,將成為第2 逆變換對象的部分。第2解碼部分訊號係第2解碼變換 輸出讯號y广,為構成解碼變換輸出訊號之複數係數値 當中’無法成為第2逆變換對象的部分。 此時’作為分割統合資訊,例如可使用用於以前所輸 入之解碼變換輸出訊號的分割時之分割統合資訊。即, 無須每當進行分割時,即決定新的分割統合資訊。 如第13 A圖所示’藉由分割部4〇〇所分割的第2解碼變換 輸出訊號火广係更換排列成一維,而輸入第2逆變換部41〇。 其次,第2逆變換部41〇係以第2逆變換矩陣’對第2解 碼變換輸出訊號y、111施以第2逆變換,來生成第1解碼部分訊 號yAiLm(步驟S234)。 此時,作為第2逆變換係數,例如町用以前所輪入之第 2解碼變換輸出訊號y%m的第2逆變換時旣已決定之係數》 即,無須每當進行第2逆變換時,即決定新的第2逆變換係數。 其次,統合部420係將第2解碼部分訊號y 1Hn m與第1解 碼部分訊號y、LmT以統合,來生成第1解碼變換輪出訊號 y广(步驟S236)。具體而言,統合部420係將第1解碼部分訊 號y am更換排列成在更換排列成一維之前的維,並基於分 割統合資訊,將更換排列後的第丨解瑪邡分訊號yAILm與第2 解碼部分訊號yA1Hn-m予以統合。 34 201136319 其次,第1逆變換部430係以第丨逆變換矩陣, 碼變換輪出訊號yv施以第m變換 味 驟S2斗 I轉碼《X"(步 此時,作為第i逆變換係數,例如可用以前所輸入之第 1解碼變換輸出訊號以的第i逆變換時既已決定之係數。 即’無須每當進行㈣變換時,即決定新顿逆變換係數。 ㈣而^第⑽圖所示,分割部_未將第2解碼變換輸出 :二2更換排列成-維,而原封不動地輪出至第2逆變換 〇亦可。此時’第2逆變換部41〇係對二維的第 換輸出訊泸νΛ ?0 七 馬34
Wy2施以第2㈣換’來生成二維的第⑽碼部分 二而且,在統合部中,並未進行第丨解碼部分 崎“更㈣列,就將第丨解碼部分 碼部分訊號“_予以統合。 Ί2解 又,第m圖及第13Β圖中,第2逆變換對象係圖示成 猶如解碼變換輸出訊號的任意區域(非長方形區域),但並非 限於此’為長方形區域亦可。具體而言,在第ΐ3Α圖及第ΐ3Β 圖顯不之例中,第2逆變換部4_將含於經矩陣表現後的 非長方形區域之訊號,作為第2解碼變換輸出訊號來進行第 2逆變換,且前述訊號係包含解碼變換輪出訊號的低頻成分 係數値者。對此,第2逆變換部彻係將包含含於經矩陣表 現後的長方形區域的係數値之訊號,作為第2解碼變換輸出 訊號來進行第2逆變換亦可,且前述訊號係包含解碼變換輸 出訊號的低頻成分係數値者。 其次’説明將分割統合資訊、第1逆變換係數及第2逆 35 201136319 變換係數h決定時的運行。 第14 m〆 圖係顯示本發明實施形態2之逆變換部330中逆變 換處理之—例的流程圖。 用°玄等對逆變換處理加以説明。 +首先,如第14圖所示,分割部400將取得分割統合資訊 (乂驟幻31)。而且,分割部4〇〇係將上述所説明的解碼變換 輸出訊號νΛη Λ & λ⑺ ,刀J成包含低頻帶域的第2解碼變換輸出訊號 〆L S兩頻帶域的第2解碼部分訊號/丨丨广⑺(步驟 S232) 〇 ,¾¾ "a而言,分割部400係基於分割統合資訊,以使 ’复換輪出訊號y /的相關能量會變得比第2解 分訊號 V'I n_m ΛΑ _L d 的相關能量為大的方式,來進行解碼變換輸出 訊號/n的分割。 、 而,分割統合資訊與在實施形態丨所説明者一樣,分割 統合資訊的取得意指:可將已保存於預先所決定的記憶體 等者予以讀出,亦可依照解碼變換輸出訊號^广來機動性地 決定。 其次,第2逆變換部410將取得用於第2逆變換的第2逆 麦換係數(步驟S233)。以第2逆變換係數構成之第2逆變換矩 陣,係在實施形態1説明過的第2變換之變換係數逆矩陣、 或近似於其的矩陣。該第2逆變換係數與實施形態丨一樣, 亦可例如以KLT,基於包含第2解碼變換輸出訊號/广之集 合SD來求取,亦可由用於編碼裝置中的第2變換之第2變換 係數來求取。 其次,第2逆變換部410係以由所決定的第2逆變換係數 36 201136319 構成之第2逆變換矩陣,對第2解竭變換輸出訊號^施以第 2逆變換’來生成第i解碼部分訊號步驟s234)。而且, 統^420係將第_碼部分訊號以及第2解碼部分訊號 y in予以、’先口纟生成第1解碼變換輸出訊號(步驟 S236)。 其次,第1逆變換部430將取得用於第t逆變換的第】逆 變換係數(步驟S237)。以第1逆變換係數構成之第^變換矩 陣’係在實施形態1説明過的第丨變換之變換係數逆矩陣、 或近似於其的矩陣。該第ι«㈣數與實施形m-樣, 亦可例如以KLT ’基於包含第丨解碼變換輸出訊號以之集 & SE來求取,亦可由用於編碼裝置中的第1變換之第1變換 係數來求取。此種逆變換係數的算出即便在以下的實施形 態,亦可同樣地來進行。 第1逆變換部430係以由所決定的第丨逆變換係數構成 之第1逆憂換矩陣,對第1解碼變換輸出訊號施以第丨逆 變換,來生成解碼訊號χΛη(步驟S2%)。 而’集合SD與集合SE ’係實施形態1的集合Sc與集合Sa 之關係’乃集合SD為較集合Se所含之樣本數為少的小集 。。如上述’具備了本發明實硃形態2之逆變換部33〇的解 碼裝置300,與實施形態丨—樣,可同時達成高效率變換與 運算量及資料量的削減。 而’先前雖令分割部4〇〇與統合部420,分別對第2解碼 變換輪出訊號y广與第1解碼部分訊號/心施以維之更換排 列’但亦可為第2逆變換部41〇進行各個更換排列之構成。 37 201136319 即,可使用分離型變換,亦可使用包含如 _ 乐8圖(b)顯示之 對角元素為1而非對角元素為〇的行之變換矩陣A4。又由 於當解碼對象為聲音資料等-維訊號、知分_^多 維訊號時的各维訊號係視為-维訊號,因此輪人逆變換部 330的解碼變換輸出訊號係一維,而無須前述維之更換排 列(分割部400中對一維訊號之更換排列、及統合部42〇令對 原先的維之更換排列)之處理。 如上述,本發明實施形態2之解碼裝置3〇〇 ,其特徵在 於:對第2解碼變換輸出訊號施以第2逆變換,並對包人第2 逆變換後訊號與第2解碼部分訊號的第丨解碼變換輸出訊號 施以第i逆變換,前述第2解碼變換輸出訊號,係對編碼訊 號施以熵解碼及逆量子化所生成的解碼變換輸出訊號之一 部分,而前述第2解碼部分訊號係解碼變換輸出訊號的剩餘 部分。藉此,依據本發明實施形態2之解碼裝置3〇(),在使 用逆變換係數的逆變換中,可實現變換的運算量削減、及 逆變換矩陣的元素數削減,前述逆變換係數係基於輸入訊 號的統計性質所計算者。又,如實施形態_示之編碼裝置 100進行包含變換之二階段變換,可將所生成的編碼訊號 予以正確解碼’ Μ述變換係使用基於輸人訊號的統計性質 所計算之變換係數者。 而,在上述實施形態2之解碼裝置则中,係將解碼變 換輸出峨y分割成第2解碼變換輸出訊號與第2解碼 #刀》K就y |H ’並於第2逆變換後予以統合,但非明示性 分割亦可。即’解碼變換輸出訊號當中,將欲成為執行 38 201136319 第2逆變換的對象之部分予以決騎可。例如,在第2逆變 換之際,使用包含如以第8圖賴示之對角元素為}而非對 角=為。的行之變換矩陣A4’可實質上於第2逆變換時執 灯分釗與統合。 第15圖係顯示本發明實施形態2之變形例的解碼裝置 300a構成之一例的方塊圖。 ,解碼裝置3〇〇a具備烟解碼部31〇、逆量子化部32〇、與 逆變換部33Ga。而,對於與第UA圖顯示之解碼裳置進 灯同運仃的處理部,予以附加同標號,而於下省略現明。 逆變換部通具備第2逆變換部咖、與第以變換部 。即,«換脚a與第糊_之逆變換部33〇相較 之下,在未具備分割部與統合部42〇之點上 逆變換部他來取代第2逆變換部仙之點上,彼此相異。 第2逆變換部她係以第2逆變換矩陣,對第2解碼變換 =^y 2 H2逆變換’來生成第1解碼部分訊號 y 1L :該第2解碼變換輪出訊號以係解碼變換輸出訊號广 的^部^。例如,第2逆變換部她係於構成解碼變換輸出 甙唬y之係數値當中’決定將成為第2逆變換對象的係數 値’並將由所決定的係數値構成之訊號 ,設為第2解碼變換 輸出/號y 2來進行第2逆變換。較具體而言’第2逆變換部 410a係於構成解碼變換輪出訊號广之複數係數値當中,將 包3較預定臨界值值為大的係數値之訊號,設為第2解碼變 換輸出訊號y广來進行第2變換。 例如’第2逆變換部410a係令將乘上第2解碼部分訊號 39 201136319 y 1Hn-m的第2逆變換係數之對角元素為1 0,而可實質上僅對第2解碼變換 1 變換,該第2解碼部分訊號 而令非對角元素為 輪出訊號yA2m ,施以第2逆 Λ y 1H係解碼變換輸出訊號yAn當 中無法成為第2逆變換對象的部分。 第16圖係顯示第15圖顯示之解— 的流程圖 置300a運行之一例 首先’熵解碼部3_將已輸人之編碼訊號予以祕 碼,來生成解碼量子化錄〇驟㈣)。其次逆量子 化卿係將解碼量子化输、予以逆量子化來生成解 碼變換輸出訊號(步驟S22〇b)。 其次’逆變換部330a係將解碼變換輪出訊號广予以逆 變換,來生成解碼訊號(步驟防叫。具體而言,首先,第2 逆變換部咖係於解碼變換輸出訊號/n當中將第2解碼變 換^出訊號yV予以逆變換’來生成以解碼部分訊號 y il (S234a),该第2解碼變換輸出訊號以係將成為第2逆 變換對象的部分。而且,第2逆變換部彻_將包含所生成 的第1解碼分訊號7 /與第2解碼部分訊號“iwn的第i 解碼賴輸出職/I"予以輸出,該第2解喝部分訊號y、Hn-m 係解碼變換輪出訊號當中未曾成為第2逆變換對象的部分。 最後,第1逆變換部430係以第1逆變換矩陣對第丨解碼 變換輸出訊號y?施以第i逆變換’ |生成解碼訊號 xAn(S238) 〇 士上述’藉由實施形態2之變形例的解竭裝置3〇〇a亦可 P 運算夏的增加及逆變換係數的資料量增加,因此可將 40 201136319 進行了二階段變換的編碼訊號予以解碼。 (實施形態3) 本發明實施形態3之編碼裝置及編碼方法具備一種變 換部及變換方法,其係將成為聲音資料、靜態影像資料、 動態景> 像資料等編碼對象的訊號,藉由複數種的變換組 合’來進行變換者。本發明實施形態3之編碼裝置及編碼方 法,其特徵在於:變換輸入訊號對預測誤差訊號施以二階 段變換,而該預測誤差訊號係編碼對象訊號(輸入訊號)與預 測訊號的差分。 第17圖係本發明實施形態3之編碼裝置5 〇 〇構成之一例 的方塊圖。如第17圖所示,本發明實施形態3之編碼裝置5 〇 〇 具備減法器505、變換部51〇、量子化部12〇、熵編碼部13()、 逆量子化部540、逆變換部550、加法器56〇、記憶體57〇、 預測部580、與控制部590。而,對於與第3圖顯示之實施形 態1之編碼裝置100同構成,予以附加同標號,而於下省略 説明。 減法器505係算出一差分(預測誤差),即編碼對象之輸 入訊號,與由以前的編碼對象訊號所生成的預測訊號之差 分。將所算出的預測誤差予以顯示之訊號,係作為變換輸 入訊號來輸入變換部510。 變換部510與以實施形態1所説明的變換部11〇一樣係 對變換輸入訊號施以二階段變換。即,變換部51〇係對變換 輸入訊號施以第1變換,來生成第丨變換輸出訊號,並對第1 部分訊號施以第2變換,來生成第2變換輸出訊號,該第!部 41 201136319 分訊號係所生成的第1變換輸出訊號的一部分。而且,變換 部510會將包含所生成的第2變換輸出訊號與第2部分訊號 的變換輸出訊號輸出至量子化部12〇,前述第2部分訊號係 第1變換輸出訊號當中第1部分訊號以外的部分。有關變換 部510的詳細,爾後予以説明。在此,將顯示預測誤差影像 的訊號作為變換輸入訊號,來輸入變換部51〇。 逆量子化部540係將藉由量子化部丨2〇所生成的量子化 係數予以逆量子化,來生成解碼變換輸出訊號。解碼變換 輸出訊號係相當於藉由變換部51〇所生成的變換輸出訊號。 逆變換部550係將藉由逆量子化部54〇所生成的解碼變 換輸出訊號予以逆變換,來生成解碼變換輸入訊號。解碼 變換輸入訊號係相當於藉由減法器5〇5所生成的變換輸入 δίΐ 破。 加法器560係將藉由逆變換部550所生成的解碼變換輸 入況戒、與自以前的編碼對象訊號所生成的預測訊號予以 累加’來生成解碼訊號。 。己It體570係用以儲存所生成的解碼訊號的記憶部之 一例。 預州邹580係以解碼訊號進行編碼對象訊號的預測,來 =成預剩訊號。具體而言,預測部580係基於預定編碼參 生成含於編碼對象之輸入影像的編碼對象區塊之預 ill素(預測訊號)。而在減法器训中係生成預測誤差影 μ預剩誤差影像係編碼對象區塊像素與預測像素之差分。 控制部590係基於局部資訊,來輸出用以控制變換部 42 201136319 510運行的。局部資訊,係例如已對應於變換係數 及分割統合f㈣㈣、或顯示預_式等的資訊。控制 部5 90係基於料局部f訊,來決定變㈣數及分割統合資 訊,並將顯示所決定之係數及資訊的控制資訊,輸出至變 換部510。 本發明實施形態3之編碼裝置5〇〇中,係基於來自控制 部590的控制,於第2變換之際,將第,換輸出訊號當令作 為第1部分訊號之將成為第2變換之對象的範圍、與第2變換 係數之至少-方’在時間上或空間上料適應性地決定。 例如’基於預定編碼參數,將第i變換輸出訊號當中作為第 1部分訊號之將成為第2變換之對象的範圍,與,第2變換係 數之至少一方予以決定。 而,記憶體570係運行為一延遲部,該延遲部係可使編 碼對象訊號、與由其以前的對象訊號所生成的預測訊號相 互比較者。由於貧訊量係藉由量子化部12〇的量子化處理而 壓縮(會發生資訊的損失)’因此為了於編瑪訊號取出編碼過 的資訊,逆量子化部540會將量子化係數予以逆量子化,來 生成解碼變換輸出訊號,而逆變換部55〇係將解碼變換輸出 訊號予以逆變換,來生成解碼變換輸入訊號。 而,逆變換部550的逆變換處理,必須有變換部51〇的 換處理與逆變換之關係成立。但,因用以抑制運算所需 的位70長之乘法的簡易化或捨入處理(r〇unding)的插入,變 換處理及逆變換處理有時亦會有無法嚴密地以矩陣來表現 的情況,又,有時亦會有將變換部51〇的變換處理與逆變換 43 201136319 部55〇的逆變換處理,設計成不滿足嚴密的逆變換關係的情況。 而’在將聲音或聲頻的資料予以編碼時,輸入訊號係 一維,而在將靜態影像或動態影像的資料予以編碼時,輪 入訊號係二維。 其次,以第18圖,來說明本發明實施形態3之編碼裝置 500執行的編碼處理。第18圖係顯示本發明實施形態3之編 碼裝置500運行之一例的流程圖。 首先’若將編碼對象訊號(輸入訊號)輸入編碼裝置 500 ’則預測部580會用記憶體570所儲存的已編碼完畢之訊 號(解碼訊號),來生成預測訊號。而且,減法器505將生成 預測誤差訊號(步驟S305),該預測誤差訊號係輸入訊號與預 測訊號的誤差。而,將輸入訊號—而非預測誤差訊號—予 以直接變換時,可省略生成步驟S3〇5的預測誤差訊號之步驟。 藉由減法器505所生成的預測誤差訊號或輸入訊號,係 輪入變換部510。並將往變換輸入之點的向量—即,預測誤 差訊號—設為變換輸入(Transform Input)訊號xn(參考式 4) °而’由於係在多數的壓縮編碼中進行預測,因此變換 輪入机號χη多為預測誤差(Prediction Error),但亦有在設想 於傳送路混入誤差的狀況下不進行預測的情況,或當能量 夠小時不進行預測而直接將編碼對象訊號(Original Signal) 〜即’輸入訊號一往變換輸入的情況。 變換部510係以某變換T將變換輸入訊號X n予以變換, 來生成變換輸出(Transform Output)訊號yn(參考式5 )(步驟 Sll〇)。又’變換輸出訊號(變換輸出向量)yn亦可僅稱為係 44 201136319 數(Coefficient)。 [數5] (式 5) /=η>η] 其次,量子化部120係將變換輸出訊號y11予以量子化, 來生成量子化係數(Quantized Coefficient)Cn(步驟S120)。量 子化部120執行的量子化處理,係加上捨入偏移(rounding offset)a後,除以一樣量子化步驟s的處理,如式6所表現。a 及s在編碼裝置500中,係為高效率編碼而受控制。 [數6] (式 6) c” =[_(/+♦」 其次,熵編碼部130係將量子化係數Cn予以熵編碼,來 生成編碼訊號(步驟S130)。所生成的編碼訊號係送往解碼裝置。 其次’如式7 ’逆量子化部540係對量子化係數Cn施以 逆!_子化’來生成解碼變換輸出(Dec〇ded Transform Output)訊號yAn(步驟 S340)。 [數7] (A7) yn=sCn 而,在除了將資料量大幅削減以外無法完全復原至原 先的資料之有損編碼(lossy c〇ding)中,由於資訊量會因量 子化處理而消失,因此解碼變換輸出訊號與變換輸出訊 娩yn*會一致。即,由於量子化的畸變(dist〇rti〇n)會混入進 解碼變換輸出巾,因而錢換前正進行預測的情況 下,解碼變換輸出訊號有時亦可稱為量子化預測誤差 (Quantized Prediction Error)。而,在有損編石馬的情況下以足 45 201136319 Π資料畺進行編碼時,資訊不太會消失,且yAn與yii幾乎 一致。 如式8,逆變換部550係對解碼變換輸出訊號 施^變換T·1 ’來生成解碼變換輸人向量χΛη(步驟S350)。 [數8] (式 8) 其次,加法器560係將上述預測訊號與解碼變換輸入訊 \予^累加,來生成解碼訊號。而且,加法器560係將所生 成的解碼訊號儲存於記憶體570 ,使其可供至下一個時序 (hmmg)來參考(步驟S36〇)。 而,變換T及逆變換τ-丨分別係以與式9及式1〇所示之ηχ 11大小的變換矩陣Α及Β的矩陣積而表現。 [數9] (式 9) [數 10] (式 10)丨[;"]=5咖j)n 在一般的變換(所謂的正交變換)中,變換矩陣β係A的 逆矩陣’為轉置矩陣(B=AT) »但,不限於此,為了抑制編 碼裝置500内的逆變換τ·1之運算量,亦有B非為A的嚴密逆 矩陣或嚴密轉置矩陣的情況。又,亦可是稱為雙正交 (Biorthogonal)變換之嚴密上未呈正交的變換A及其逆變換B。 式9中變換矩陣Anxn對變換輸入xn的矩陣積,係以式^ 表現。變換矩陣的乘法次數及變換矩陣的元素數為ιΓ2。 [數 11] 46 201136319 (式 k=\ 其次,說明本發明實施形態3之變換部51 〇的構成及運 行。第19圖係本發明實施形態3之變換部510的詳細構成之 一例的方塊圖。 如第19圖所示,變換部510具有第1變換部200、第1記 憶體601、第1變換係數導出部2〇2、分割部21 〇、第2記憶體 611、分割統合資訊算出部612、第2變換部220、第3記憶體 621、第2變換係數導出部222、與統合部230。而,對於與 第3圖顯示之變換部11〇同構成,附加了同標號。 已輸入變換部510的變換輸入訊號xn,係輸入第丨記憶 體601與第1變換部2〇〇。 第1記憶體601係用以將關於複數變換輸入訊號χΠ之資 訊予以記憶之記憶體。 第1變換係數導出部2 〇 2係生成第丨變換係數’並將所生 成的第1變換係數往第丨變換部2〇〇輸出,該第丨變換係數係 從第1記憶體601的資訊,構成用於第丨變換Τ|的第丨變換矩 陣A,者。 第1變換部200係以第1變換矩陣,對已輸入之變換 輸入訊號變換τι,來生成第1親輸出訊號yi' 該第1變換矩陣Aln係由第1變換係數導出部202所算出的第 1變換係數而構成。第1變換輸出訊號yr係輸入第2記憶體 611及分割部210。 第2記憶體611係用以 將關於複數第1變換輸出訊號< 47 201136319 之資訊予以記憶之記憶體。 分割統合資訊算出部612係從第2記憶體611之資訊,生 成分割統合資訊,並將所生成的分割統合資訊往分割部210 及統合部230輸出。分割統合資訊係分割的控制資訊,即, 如將第1變換輸出訊號y,n當中低域成分往第丨部分訊號y i L m 分割’而將高域成分往第2部分訊號y1Hn_m分割者。此外, 亦可是如將能量大的成分往第1部分訊號y|Lm分割,而將能 量小的成分往第2部分訊號yIHn-m分割之資訊。 分割部210係將第1變換輸出訊號yin,基於分割統合資 訊往m點的第1部分訊號yiLm、與n-m點的第2部分訊號yIHn_m 分割(在此,m係較η為小的自然數)。即,分割部21〇係將由 π個係數値構成之第1變換輸出訊號yin,分割成由m個係數 値構成之第1部分訊號y1Lm、及由n_m個係數値構成之第2部 分訊號ymn-m。第1部分訊號y1Lm係輸入第3記憶體621及第2 變換部220。又,第2部分訊號y1Hn-m係輸入統合部230。 第3記憶體621係將關於複數第1部分訊號yiLm之資訊予 以記憶之記憶體。 第2變換係數導出部222係生成第2變換係數,並將所生 成的第2變換係數往第2變換部220輸出,該第2變換係數係 由第3記憶體621的資訊構成用於第2變換τ2的第2變換矩陣 A2m 者。 第2變換部220係以第2變換矩陣八/,對第1部分訊號 yam施以第2變換I,來生成第2變換輸出訊號y,,該第2 變換矩陣A,係由第2變換係數導出部222所算出的第2變換 48 201136319 係數而構成者。 統合部230係依照分割統合資訊,將第2變換輸出訊號 y2m與第2部分訊號7’予以統合,來生成變換輸出訊號 y。而,統合係指分割的相反處理。 藉由第2變換係數導出部222而決定的第2變換係數,係 對第1部分訊號y1Lm施以最佳設計後的變換餘。因此,用 了第2變換矩陣A2m的第2變換丁2,係可將殘留於第i變換輸 出訊號的冗長性予以削減之變換,而發揮有助於編碼訊 號壓縮的效果。 又,藉由分割部210將第丨變換輸出訊號yin予以分割, 可減少對第2變換部220之輸人訊號(即第i部分訊號)的點數 (係數値的個數广因點數減少,可獲得第2變換部22〇的運算 量削減效果、及第2變換部220的變換係數總數(即資料量) 的削減效果。 在此,記述下列兩點:來自第換係數導出部2〇2的 第1變換係數之生成,及,來自第2變換係數導出部222的第 2變換係數之生成。在該等變換係數之生成中,例如使用上 述 KLT。 KLT(Karhunen Loeve Transform : KL轉換)係基於包含 輸入訊號的某集合之統計性質,來設計往頻率區域之變換 的手法,該頻率區域係可將輸入訊號予以完全無相關化 者。具體而言,係將如成為輸入訊號的分散共分散矩陣 (Variance-covariance matrix)之非對角元素為〇之變換予以 求出者’此係相當於將分散共分散矩陣之固有値問題予以 49 201136319 解決者。所導出的固有向量會成為基底函數’而固有値會 成為變換係數的各成分軸之大小(即能量)。將變換係數從固 有値之値(分散、或能量)大的轴,予以排列到小的軸。以該 順序排列,例如,若將變換輸入訊號設為η點向量,且於變 換輸出訊號的η點向量當中,比較第i項元素(l$i<n)與第j 項(i<j^n)元素的能量,則第丨項元素的能量會變得較第j項 元素的能量大(可將變換係數設計成可變大)。 在本發明中,在使用低頻帶域及高頻帶域之表現時, 該等係分別對應於相對上持有小號碼的元素、與相對上持 有大號碼的元素,而非嚴密上有規定範圍大小者。本發明 之主要目的係在於削減消耗在變換及逆變換等之資源(運 算量或使用記憶體量)’但資源與變換性能,在廣義上有交 互損益(trade off)之關係’且是依照本發明使用的方法或裝 置之目的而設定者。 但’如在習知技術課題中所言及,一旦將持有與導出 變換係數時所參考的集合相異統計性質之集合予以輸入, 則採用了導出後變換係數的變換,將無法成為最佳。對此, 依照輸入訊號的性質,每當將輸入訊號予以輸入時,若將 變換係數予以導出,則變換係數的資料量將會變得很龐大。 對於該課題,在本實施形態中係採用複數變換。即, 在第1變換中,依照較大集合、的統計性質,採用以最佳導 出後的變換係數構成之變換矩陣來進行變換,而在第2變換 中,依照較小集合SB的(第1變換輸出訊號的)統計性質,採 用以最佳導出後的變換係數構成之變換矩陣來進行變換。 50 201136319 而’本發明實施形態3之編碼裝置500,在將第2變換係 數導出時’具備有將輸入訊號特徵予以解析的局部集合判 定部亦可。即’本發明實施形態3之編碼裝置5〇〇具備有第 20圖顯示之變換部510a來取代變換部51〇亦可。如第2〇圖所 示’變換部510a具備局部集合判定部623。 局部集合判定部62 3係將變換輸入訊號Xn的特徵予以 解析’並基於解析結果來控制第2變換係數導出部222。而, 雖未圖示在第20圖,但局部集合判定部623亦可執行第19圖 顯示之分割統合資訊算出部612的控制。有關局部集合判定 部623的具體處理,在以下以第2丨圖予以説明。 第21圖係將本發明實施形態3之變換部51〇a中變換係 數之導出之一例予以概念性顯示之圖。 設想:變換輸入訊號xn屬於大集合Sa,並屬於較小集 合sB⑴與sB(2)之任一者的情況。而,第21圖中,集合%係圖 示成由集合SA所包含,但在如變換輸入訊號/屬於集合% 而不屬於集合sA、且集合%不含於集合心的情況下,亦可 適用同樣的導出方法。 第1變換部200所採用的第!變換係數,係藉由第i變換 係數導出部202而生成。第丨變換係數導出部2〇2,係基於含 有較多樣本的集合SA,來將第丨變換係數予以最佳化。 集合SA包含較多的樣本,因此第丨變換係數可在平均上 最佳化,且可使其不太受各個變換輸入之差異影響。藉此, 可抑制第1變換係數的更新頻率。又,在進行第i變換係數 的更新時亦同’由於變換係數的各個値之變化量會變小, 51 201136319 因而可減少差分資訊量。因此,可削減將第丨變換係數傳輸 至解碼裝置時的代碼數量。 第2變換係數,係變換輸入分別最佳化至集合SB⑴與 Sb(2)而導出。第2變換部220中,由於將成為第2變換對象的 第1部分訊號之點數,係以分割而減少成較變換輸入訊號的 點數為低’因此可削減運算量與變換係數的資料量。即, 往成為第2變換對象的第2變換部220之輸入訊號,並非是含 於集合SB⑴、SB(2)的變換輸入訊號xn本身,而是第丨變換輸 出訊號y,n—部分的第丨部分訊號yiI m。 局部集合判定部623係將變換輸入訊號χ η的特徵予以 解析,來檢出小集合的統計性變動。一旦檢出變動,即將 屬於小集合的複數樣本予以決定,並通知第2變換係數導出 部222。或,局部集合判定部623係判斷變換輸入訊號^屬 於預先所規定的小集合之何者亦可。 往第2變換部220的輸入訊號(即,第1部分訊號yiLm), 有時會依賴預測訊號的生成方法。因此,局部集合判定部 62 3係依照預測訊號的生成方法(預測訊號模式)—例如, H.264的面内預測方向,於構成第丨變換輸出訊號y|n之複數 係數値當中、來判斷作為第丨部分訊號。^將成為第2變換對 象的範圍亦可。或,局部集合判定部623係預先規定N個小 集合,並以將屬於其中任一者是否為最可減輕資訊量予以 評價後之指標為基準,來判定作為第丨部分訊號力^將成為 第2變換對象的範圍亦可。 第2變換係數導出部222係基於藉由局部集合判定部 52 201136319 623所檢測出的統計性變化之指示,對屬於小集合的複數樣 本之第1變換輸出訊號y|n,導出第2變換係數,該第2變換係 數係設計成使資訊量成為最小者。或,第2變換係數導出部 222係將已預先算出的變換係數,從記憶體叫出。 此時,分割統合資訊算出部612與變換係數一樣,將進 行分割統合資訊的決定。或,分割統合資訊算出部612係將 已預先异出的分割統合資訊,從記憶體叫出亦可。 分別最佳設計成較小集合SB⑴、Sb(2)(的第丨變換輸出訊 號)之第2變換係數’可追隨統計性質的變化,來施予無相 關化與能量壓縮之效果的上乘絲。再者,第2變換係藉由 分割部210而達致將輸人訊號的維數予以減輕的狀態,因此 在用於可減輕變換轉的元絲及變換的運算量上很有效率。 為較小集合的集合SB,係包含已產生局部性變化的變
具體而言, -於預定編碼參數, 一個。編碼參數係 八體而言,局部集合判定部623係基於 來決定變換係數及分割統合資訊的至少一 > 53 201136319 ‘”’員不預先所決定之複數預測方法當中的_個預測方法。例 如。,局部集合判定部623,係依照為編碼參數一例的面内預 測或面間預測的預測模式,來切換變換係數及分割統合資 Λ亦可。或者’储複數變換係數與分_合資訊的集合 之中’將欲選擇何者明示地予以多工至編碼串流亦可。 又’從面内預測或關預職式娜變換係數及分割 統合資訊時,將複數預測模式對應至一個變換係數與分割 統合資訊亦可。分割統合資訊係相較下變化較少的資訊, 因此較變換係數可將切換的種類減少’並將與分割統合資 訊相關聯之記憶體使用量予以減輕亦可。 而’第19圖中,雖已將具備了用以導出第i變換係數、 分割統合資訊、第2變換係數的記憶體、及導出部之構成予 以例示’但,即便非完全最佳解決方案,基於經驗或準最 佳方法,將該等任-個或全部事前予以導出亦可。第糊 係本發明實施形態3之變換部的其他-例的方塊圖。 第22圖顯示之變換部鳩,與第19圖顯示之變換部别 相較之下’在不具備有第1記憶體60卜第2記憶體6U、第3 記憶體62卜第!變換係數導出部2〇2、第2變換係數導出部 222及分割統合資訊算出部612之點上,彼此相異。即,變 換部鳩係從外部取得曾預先於事前所導出之第丨變換係 數、第2變換係數及分割統合資訊,並基於所取得的係數及 資訊,來進行變換及分割。 側:: 54 201136319 有效精確度予以降低)、或設為零’而將對於高域訊號之運 算量予以肖m者。此時,分割部與統合部並未明示顯現在 方塊圖上(參考第9圖),但即便為未顯現之構成,亦可 該當本發明之構成。 ‘”' 第23圖係具備第糊顯示之變換部5iQa的編碼裝置 5〇〇a構成的方塊圖。第23圖顯示之編碼裝置5〇〇a,與第p 圖顯示之編碼裝置5GG相較之下,在具備變換部51Qa來取代 變換部510之點,與不具備控制部59〇之點上,彼此相異。 本發明實施形態3之變形例的變換部51〇a之變換處理 流,與實施形態1一樣。具體而言,同第6圖所示,首先, 第1變換係數導出部202決定第1變換係數(步驟sm卜其 次,第1變換部200係以第1變換矩陣對變換輸入訊號施以第 1變換,來生成第1變換輸出訊號(步驟SU2),前述第丨變換 矩陣係由所決定之第丨變換係數構成。 其次,分割統合資訊算出部612(無圖示)或局部集合判 定部623決定分割統合資訊(步驟S113)。而且,分割部21〇 係將第1變換輸出訊號分割成第丨部分訊號與第2部分訊號 (步驟S110)。此時’分割部210係將第i部分訊號的相關能量 分割成變得較第2部分訊號的相關能量大。 其次,局部集合判定部623將第1部分訊號的局部性集 合之統計性質予以解析,而第2變換係數導出部222基於解 析結果,來決定第2變換係數(步驟S115)。其次,第2變換部 220係以第2變換矩陣對第丨部分訊號施以第2變換,來生成 第2變換輸出訊號(步驟SU6),前述第2變換矩陣係由所決定 55 201136319 之第2變換係數構成。 最後’統合部230係將第2部分訊號與第2變換輸出訊號 予以統合,來生成變換輪出訊號(步驟sm)。而,步驟sin、 步驟S113、步驟S115係由其他方法來決定,作為本實施形 態的一部分而未予以運行亦可。 士以上所示,依據本發明實施形態3之編碼裝置及編碼 方法,可因應變換輸入訊號,來適應性地將變換係數及分 割統合資料以變更,因此可抑制變換處理的運算量與變 換係數的資料量’且可適應輸人訊號的統計性質之變化。 、下以第24A圖及第24B圖説明本發明實施形態3之 變形例的編碼裝置。 本發明實施形態3的變形例中,如第2从圖顯示之編碼 褒置麻,亦可用由縣已規定的變換係數(贱已導出的 變換係數)構成之預定變換矩陣來進行第稷換。第24A圖係 顯示本發明實施形態3之變形例的編碼裝置細罐成之一 例的方塊圖。 如第24A圖所示’編碼裝置5〇〇c與第23圖顯示之編碼裝 置500a相較之下’在具備變換部51Qe來取代變換部偷之 點,及最新具備記憶體624之點上,彼此相異。 變換部他與變換部51叫目較之下,在具備第2變換係 數導出部222e及局部集合判"623。來取代第2變換係數 導出部222及局部集合判定部623之點上,彼此相異。第沒 換係數導出部222c係基於由局部集合判定部62几輸出的導 出控制訊號’來生成第2變換係、數。所生成的第換係數 56 201136319 係儲存於記憶體624。 記憶體624係用以將至少一個第2變換係數予以記憶之 記憶部的一例。記憶體624係從記憶中的至少一個第2變換 係數之中,將第2變換係數輸出至第2變換部220與熵編碼部 130,前述第2變換係數係基於從局部集合判定部623c輸出 之選擇訊號而加以選擇過者。 例如,記憶體624記憶有對應索引與第2變換係數。選 擇訊號係顯示索引之訊號,而記憶體624則會將已對應於選 擇訊號顯示之索引的第2變換係數予以輸出。 具體而言,記憶體624係記憶有具有彼此相異之係數値 之組的複數變換矩陣,來作為第2變換係數的候補。複數變 換矩陣係一對一地對應有為編碼參數一例的索引資訊。而 且,第2變換之際,將藉由選擇訊號顯示之索引資訊指定的 變換矩陣,決定為第2變換係數。 第2 5圖係將在本發明實施形態3之變形例的編碼裝置 中,已儲存於記憶體之第2變換係數與分割統合資訊的對應 關係之一例予以顯示之圖。如上述,記憶體624會將索引與 第2變換係數予以對應並記憶。又,如第25圖所示,亦可於 記憶體624進一步將選擇範圍資訊(在此為分割統合資訊)與 索引予以對應並記憶。 具體而言,首先,局部集合判定部623c係基於輸入訊 號的特性,或基於壓縮過資訊量的推定値大小,來輸出選 擇訊號,該選擇訊號係用以將應採用預先已規定的變換係 數及分割統合資訊之何者予以選擇者。基於所輸出的選擇 57 201136319 訊號,記憶體624將預先已規定的變換係數往第2變換部220 輸出。又,在記憶體624亦保持有分割統合資訊的情況下, 將分割統合資訊往分割部210及統合部230輸出(未顯示於 第24A圖)。 選擇訊號係視必要來適用資訊量的壓縮(例如,將與由 周邊相鄰接區塊的索引所預測之預測索引的差分訊號予以 輸出),而在熵編碼部130中,係多工成編碼訊號。 又,局部集合判定部623c亦有時會將對第2變換係數導 出部222c指示的導出控制訊號予以輸出,來導出新的第2變 換係數。此時,新導出的第2變換係數係儲存於記憶體624。 又,局部集合判定部623c係將導出控制訊號輸出至分割統 合資訊算出部(無圖示),來使新的分割統合資訊予以算出亦 可。而,分割統合資訊的算出係由第2變換係數導出部222c 執行亦可。 新第2變換係數與分割統合資訊,係視必要將資訊量予 以壓縮,並在熵編碼部130中多工成編碼訊號。換言之,第 2 4 A圖顯示之實施形態3的變形例之編碼裝置5 0 0 c,係將第2 變換係數及分割統合資訊往解碼裝置輸出。而,並非將第2 變換係數本身予以輸出,而是將顯示索引的選擇訊號予以 傳輸,而使在解碼裝置側,將解碼裝置所記憶有的第2變換 係數予以選擇亦可。 而,如前述,變換輸入訊號係輸入訊號與預測訊號之 差分,因此會依賴預測訊號的特性。在預測訊號可順利預 測、與無法順利預測的情況下,變換輸入訊號的特性亦有 58 201136319 可能有不同的情況,因此局部集合判定部623c係依照變換 輸入訊號大小,來切換第2變換係數與分割統合資訊亦可。 又,如第24B圖顯示之編碼裝置500d,係基於顯示預測 方法的種類別之資訊(預測模式訊號),來控制第2導出變換 係數亦可。第24B圖係本發明實施形態3之變形例的編碼裝 置500d構成之一例的方塊圖。 如第24B圖所示,編碼裝置500d與第24A圖顯示之編碼 裝置500c相較之下,在具備變換部510d來取代變換部510c 之點,與最新具備預測控制部585之點上,彼此相異。又, 變換部510d與變換部510c相較之下,在具備局部集合判定 部623d來取代局部集合判定部623c之點上,彼此相異。 預測控制部585係決定預測模式訊號,並往預測部580 輸出,且往局部集合判定部623d輸出。預測模式訊號係視 必要執行將與來自附近區塊資訊的推定値之差分予以去除 等,來壓縮資訊量,並在熵編碼部130中往編碼訊號予以多工。 局部集合判定部623d係基於預測模式訊號,來輸出選 擇訊號,該選擇訊號係用以將選擇預先已規定之變換係數 與分割統合資訊予以選擇者。基於選擇訊號,記憶體624係 將預先已規定之第2變換係數往第2變換部220輸出,並將分 割統合資訊往分割部210及統合部230輸出。 又,局部集合判定部623d有時亦會將對第2變換係數導 出部222c指示的導出控制訊號予以輸出,來導出新的第2變 換係數。此時,新導出的第2變換係數係儲存於記憶體624。 又,局部集合判定部623d係將導出控制訊號輸出至分割統 59 201136319 合資訊算出部(無圖示),來使新的分割統合資訊予以算出亦 可。而,分割統合資訊的算出係由第2變換係數導出部222c 執行亦可。 新第2變換係數與分割統合資訊,係視必要將資訊量予 以壓縮,並在熵編碼部130中多工成編碼訊號。 而,局部集合判定部623d係依照變換輸入訊號的大 小,來切換第2變換係數與分割統合資訊亦可。而,預測方 法有複數種,其中一個係以預測模式訊號來進行指示。預 測可為框間預測(間預測),亦可為框内預測(内部預測)。框 内預測係將編碼完畢(解碼完畢)的周邊相鄰接像素以預定 方向外插而予以預測的方法亦可。 又,以將預測訊號予以生成後的預測方法之角度(框内 預測的情況為預定外插角度)為基準,在可使經最佳化呈向 其角度之分割統合予以執行的條件下,來決定分割統合資 訊亦可。對於分割統合資訊,係採用第26A圖〜第26C圖來 說明其概念。 第26A圖係顯示4x4區塊的第1變換輸出訊號,其左上乃 顯示了低域之例。一般而言,令能量容易集中的低域側為 第1部分訊號,令其以外的高域部分為第2部分訊號,以對 第1部分訊號施以第2變換,來進一步進行壓縮。而,在此 為了説明,將第1變換輸出訊號的NxN個元素係屬於哪個部 分,定義為Gij={0,l}(i為垂直下方向,而j為水平右方向, ij皆為1起點,若屬於第1部分訊號則為0、若屬於第2部分訊 號則為1)。 60 201136319 第26B圖係顯示從複數分割統合資訊之中基於内部預 測的預測方向,來選擇分割統合資訊之例的概念圖。設右 上方向為角度基點,將分割統合資訊設計成將自〇到冗[rad] 為止的範圍分割成數個的角度單位。第26B圖係定義了 4個 分割統合資訊之例。 具體而言,設計角度為水平之S〇,係設想功率(p〇wer) 集中於左側(在水平方向DC),而優先設GOj為〇(即第}部分 訊號)。設計角度為垂直之S|,係設想功率集中於上側(在垂 直方向DC),而優先設GjO為〇(即第丨部分訊號)。而設計角 度為傾斜之Si與I,係例如優先設Gij(i<=l、j<=l)為〇。 第26C圖係在4x4區塊當中令4元素為第丨部分訊號來選 擇時,準備8種角度一即8種分割統合資訊時的範例。如該 範例所示,可對角度與構成第1部分訊號之係數値之位置定 義關係性,並可用任意的角度來決定構成第丨部分訊號之係 數値之位置。 如此一來,第2變換之際,編碼參數係顯示將對預定方 向的外插予以顯示之預測方法時,構成第丨變換輸出訊號之 複數係數値當巾,將包含簡定方向的係數値之㈣作為 =2 4換對象來予以決定。包含預定方向的雜値之範圍意 才曰具體上包含預定方向的起點側之係數値—即,外插方向 之起點側的係數値—的範圍。 例如編碼參數係顯示將對略水平方向(右方向)的外插 卷‘.、、員丁之預測方法時,構成第丨變換輪出訊號之複數係數 値备中,將包含橫方向係數値(具體上為左側係數値)的範圍 201136319 作為第2變換對象來予以決定。又,編碼參數係顯示將對略 垂直方向(下方向)的外插予以顯示之預測方法時,構成第1 變換輪出訊號之複數係數値當中,將包含縱方向係數値(具 體上為上側係數値)的範圍作為第2變換對象來予以決定。 換言之,在作為第2變換對象而決定爪個係數値(元素) 係從構成第1變換輸出5凡破的η個係數値之中,決定離 外插方向的起點側較近的m個係數値。較具體而言,包含左 上係數値、與靠近外插方向起點側的係數値。 ▲例如,如第26B圖之S〇選擇了往右方向的外插方向時, 卜插方向的起點為左側,因此靠近左側的爪個係數値會作 第刀汛號而予以選擇。同樣地,如第26B圖之&選擇 了往右下方向的外插方向時,該外插方向的起點為左上 側’因此靠近左上側的爪個係數値會作為以部分訊號而予 二選擇。再者,如第26_2選擇了往下方向的外插方向 外插方向的起點為上側’因此靠近上側如個係數値 Θ作為第1部分訊號而予以選擇。 ΔΌΟ mi 番方向的起點側為左T或右上等時,作為 決定,値(元素)時,在包含左上係 ,側之係數値、沿著外插方向物: 側係數二_«會如s6’包含左上係數値((ι,”)與上 的係數値丄:1,3)),且洲 62 201136319 (實施形態4) 本發明實施形態4之解碼裝置及解碼方法具備一種逆 變換部及逆變換方法’其係聲音資料、靜態影像資料、動 態晝像資料等訊號,以複數種變換的組合,將編碼過的編 碼訊號(例如’在實施形態1或3中所生成的編碼訊號)予以逆 變換者。本發明實施形態4之解碼裝置及解碼方法,其特徵 在於預測誤差訊號對編碼過的訊號施以二階段逆變換,前 述預測誤差訊號係編碼對象訊號(輸入訊號)與預測訊號之 差分。 第2 7圖係顯示本發明實施形態4之解碼裝置7 〇 〇構成之 一例的方塊圖。如第27圖所示,本發明實施形態4之解碼裝 置7〇〇具備:熵解碼部310、逆量子化部32〇、逆變換部73()、 控制部740、加法器750、記憶體76〇、及預測部頂。而, 對於與第UA圖顯示之實施形態2之解碼裝置3〇〇同構成,予 以附加同標號,而於下省略説明。 逆變換部730與以實施形態2所說明的逆變換部33〇 一 樣’係將藉由逆量子化部3斯生成的解碼變換輸出訊號予 :乂延變換,來生成解碼變換輸入訊號。具體而言,逆變換 :咖係對解碼變換輸出訊號施以二·逆變換。而,基於 自控制部740的控制訊號,來決定用、 動;5八變換的逆變換係 刀口·)位置(將成為第2逆變換對象 . 部⑽的詳細,爾後予以説明。的有關逆變換 運= Γ74ί)係'基於局部f訊,將用於控制逆變換部730 二制《予以輸出。局部資訊為蝙碼參數之_例, 63 201136319 係例如已對應於逆變換係數及分割統合資訊之索引,或, 顯示於編碼時所用的預測模式等之資訊。控制部74〇係美於 該等局部資訊,來決定逆變換係數及分割統合資訊,並將 顯示所決定的係數及資訊之控制資訊,輪出至逆變換部 730 ° 加法器750係將藉由逆變換部73〇所生成的解碼變換輸 入訊號、與由預測所生成的預測訊號予以累加,來生成解 碼訊號,前述預測係基於由以前的編碼訊號所生成的解碼 訊號者。 記憶體7 6 G係用來將所生成的解碼訊號予以儲存之記 憶部的一例。 預測部770係以執行預測,來生成預測訊號,前述預測 係基於由以前的編碼訊號所生成之解碼訊號者。即,預測 部770係以已儲存於記憶體的解碼完畢之解碼訊號為基 準,來生成預測訊號。例如,預測部77〇基於編碼參數,來 二成3 ?測§吳差影像之解碼對象塊的預測像素(預測訊 像素及解碼成的預測 碼訊號)。 I予以累加’並復原輪入影像(解 逆邊換部730係從編碼裝置取彳鼻坌7 ^ 分割統合資H π $置取付第2逆變換係數及 數,並從第2辦植°/而,從編碼裝置取得者是第2變換係 交換係數求得第2逆變換# | 資訊係顯示第2解满義认 亦可。分割統合 號的哪個部分之選擇範圍;於解碼變換輸出訊 64 201136319 本發明實施形態4之解石馬裝置中,係基於來自控制 部Μ的㈣’於第2逆變換之際,將解碼變換輸出訊號當 :作為第2解碼變換輸出訊號之將成為第2逆變換之對象的 範圍、與第2逆變換係數之至少一方,在時間上或空間上予 以適應性地決定。例如,基於預定編碼參數,將解碼變換 輸出訊號當中作為第2解碼變換輪出訊號之將成為第2逆變 換之對象的範圍、與第2逆變換係數之至少一方予以決定。 其次’以第28圖說明本發明實施形態4之解碼裝置· 仃的解碼處理。幻8_係顯林發明實削彡態4之解碼裝 置700運行之—例的流程圖。 、 首先予員測部77〇係以已儲存於記憶體湖的解碼完 之解碼訊料鱗,來线軸《(娜秘)。而,在解 T直賤換碼料射·編碼訊 可省略本步驟S405。 ^ _解瑪部31G係將已輪人之編碼訊號予以網解 和’/生成量子化係數(步驟_)。逆量子化部320係將量 子化係數予以逆吾;儿+A ^ ^ 夏 S22〇)。 千化,來生成解碼變換輸出訊號(步驟 換^次’逆變換部730係將解瑪變換輸出訊號广予以逆變 如第12/解碼變換輸人訊號,(步驟湖)。具體而言, 換,來生^14圖所示,逆變換部730係、以執行二階段逆變 來生成解,換輸人訊號χΛ 文 之逆變_在解·之^ _ 之變換的逆變換者。_之-涵,非限於編碼裝置 65 201136319 其次,加法器75〇係將解碼變換輸入訊號與預測訊號 予以累加,來生成解碼訊號。解碼訊號係作為解碼裝置700 全體的輸*訊號來輸出。又,解碼訊號係儲存於記憶體 760(步驟S44G) ’而於後續編碼㈣賴碼之野以參考。 即,s己憶體760係作為延遲部來運行。 而,在解碼聲音或聲頻之資料時,輸出訊號係一維, 而在靜絲像及動態畫像解碼裝置巾輸出訊號係二維。 又,可略除預測部77〇及記憶體760,來例示解碼裝置(或運 行模式)’ 4解碼裝置(或運行模式)係如不進行預測而將解 碼訊號設為直接輸出訊號者。 其次,以第29圖說明本發明實施形態4之逆變換部73〇 之構成。第29圖係顯示本發明實施形態4之逆變換部730構 成之一例的方塊圖。 逆變換部730具備:分割部400、第2逆變換部41〇、統 合部42 0、與第1逆變換部4 3 〇。將解碼變換輸出訊號〆η輸入 逆變換部73G。而’解碼變換輸出訊號/"仙當於第17圖顯 示之變換部51〇所生成的變換輸出訊號yn。 分割部4〇〇係依照分割統合資訊,將解碼變換輸出訊號 y n分割成第2解碼變換輸出訊號與第2解碼部分訊號。 第2逆變換部41〇係以第2逆變換矩陣,將第之解碼變換 輸出訊號予以逆變換,來生成第丨解碼部分訊號。 ’”先& Μ20係依照分割統合資訊,將第2解蜗部分訊號 與第1解碼部分訊號予以統合,來生成第1解碼變換輸出 訊號。 66 201136319 第1逆變換部430係以第丨逆變換矩陣,將第碼變換 輸出訊號予以逆變換,來生成解碼變換輸入訊號。而,解 碼憂換輸入況號係相當於第17圖顯示之輸入於變換部5 1 〇 的變換輸入訊號。 分割統合資訊係同等於上述實施形態所記載者,往分 割部400輸入(解碼變換輸出訊號)的維數為〇,而往第】逆變 換部410輸入(第2解碼變換輸出訊號)的維數為〇1(111<〇之自 然數)。而,先將往第2逆變換部410輸入時的維數設為η, 第2逆變換部410係採用變換矩陣八4亦可,該變換矩陣八4係 包含如第8圖(b)顯示之對角元素為丨而非對角元素為〇之行 者。第2變換部係分離型亦可。 用於第2逆變換之第2逆變換矩陣,係近似相關於實施 形態1或3所記載的第2變換之變換矩陣的逆矩陣或逆矩 陣。用於第1逆變換之第】逆變換矩陣,係近似相關於實施 形態1或3所記載的第1變換矩陣之逆矩陣或逆矩陣。為了將 逆變換之運算所需要的運算精確度抑制得很低,有時亦會 降低第1逆變換係數與第2逆變換係數之有效精確度。: 時,逆變換部的運算精確度在賦予編碼及解碼全體的歪變 上呈支配性狀態’因此宜以實施形態2或本實施形態所記載 換係數為基準’導出實施形態1或3所記載之第1 2 並同樣以第2逆變換係數為基準,導出第2變換 而第2逆變換係數、第】逆變換係數、及分 訊係多工成編碼訊號,並由編碼裝置通知解碼裝置、^ 67 201136319 使用別的傳送頻道,不將其予以多工成編碼訊號即進行通 知、或以傳送蓄積格式來進行通知亦可。或者,作為某規 格或規格的設定檔(profile)水準之規定値來進行通知,或, 基於以解碼裝置與編碼裝置兩者所得之資訊來進行通知等 亦可。 本發明實施形態4之逆變換處理的運行與實施形態二一 樣。具體而言,同第14圖顯示,首先,分割部4〇〇取得分割 統合資訊(步驟S231)。而且,分割部4〇〇係依照所取得的^ 割統合資訊,將解碼變換輪出訊號分割成第2解碼變換輪: 訊號與第2解碼部分訊號(步驟§232)。 其次,第2逆變換部410取得第2逆變換係數(步驟 S233)。而且’第2逆變換部410係對第2解碼變換輸出訊號 施以第2逆變換,來生成第丨解碼部分訊號(步驟S234)。 其次,統合部420依照分割統合資訊,將第丨解碼部分 訊號與第2解碼部分訊號予以統合,來生成第i解碼變換輸 出訊號(步驟S236)。 其次,第丨逆變換部430取得第丨逆變換係數(步驟 S237)i且’第1逆變換部43〇係對第i解碼變換輸出訊號 施以第1逆變換,來生成解碼變換輪入訊號(步驟S238)。儿 而,取得分割統合資訊之步驟_、與取得逆變換係 數之步驟S232及步驟S234,如前述有多種通知的類型 (variation),因此不限於在本流的時序申實施,又並非本 實施形態一部分的必要運行。 如以上,因本發明實施形態4之解碼裴置及解碼方法, 68 201136319 可抑制變換處理之運算量與逆變換係數之資料量,並適性 於輪入訊號的統計性質之變化。又,如實施形態3所示之編 碼裝置500,可將以執行二段階變換所生成的編碼訊號予以 :確解碼’前述二段階變換係包含採用變換係數之變換 者’且該變換係數係基於輸入訊號的統計性質而計算者。、 之如第30圖顯*之解碼裝置·a,可將已預先規定 選擇數u統合#訊,基於由編碼訊號經解碼之 資擇=予以選擇’並用所選擇的逆變換係數及分 * 二 置700相 =G圖所^解料置鐵與第27圖齡之解碼裝 相異。乂之下’在最新具備記憶體781及782之點上,彼此 錢體781記錄有第2逆變換 記憶體782記錄右用认、 相對應。又, 相對應。、4割及統合的分割統合資訊與索弓丨 變換3 =補記=1記錄有複數變換矩陣作為第2逆 値之組者。編二::數=:具有彼此相異, 於複數變換矩陳。 ^地對應 ^ 於第2逆變換之際,藉由選 所指定的變換一將決定作為: 擇訊及$分別係基Γ由網解碼部310輸出的選 錢換係數及分割統合資訊,並輪出至逆 69 201136319 變換部730。具體而言,選擇訊號係例如顯示索引之訊號, 且,已對應於選擇訊號顯示之索引的逆變換係數及分割統 合資訊將可輸出。 °、 具體而言,熵解碼部310係將編碼訊號予以熵解碼,來 取出壓縮完畢選擇訊號,並從壓縮完畢的選擇訊號將選擇 Λ號予以解碼。而且,熵解碼部31〇係將已解碼之選擇訊號 往記憶體781與記憶體782輸出。第2逆變換係數與分割統合 資訊將分別自記憶體781及782往逆變換部73〇輪出。 該選擇性架構,係適應於時間空間性,並基於選擇訊 戒以複數個整合單位、或以片(slice)單位來執行區塊單 位、巨集塊單位、巨集塊亦可。又,將面内預測模式盘選 擇訊號組合來賴㈣予_行村。而,依⑽蜗量子 化係數之非零錄的總數、低域區域之非零係數的總數、 非零係數階段的總和、逆量子化部32G輸出的解碼變換輸出 =號/之總和、及低域區域之總和等,將第2逆變換係數及 分割統合資訊予以切換亦可。 *又,如第31圖顯示之解喝裝置鳩,亦可將已預先規 ^逆隻換係數及刀割統合資訊,基於由編碼訊號經解石馬 =預測訊號予以選擇,並用所選擇的逆變換係數及分割统 =訊來加以逆變換。第31圖軸示本發明實施形態4之解 ’’’’骏置700b構成之一例的方塊圖。 晋如第31圖所示,解碼農置鳩b與第30圖顯示之解碼裳 相較之下,在最新具備選擇訊號決定部刑之點上: 久此相县〇 70 201136319 選擇訊號決定部790係將自熵解碼部3 10輸出的預測模 式訊號予以取得,並基於已取得的預測模式訊號來生成選 擇訊號。選擇訊號係例如顯示索引之訊號,從記憶體781及 782可將已對應於選擇訊號顯示之索引的逆變換係數及分 割統合資訊,輸出至逆變換部730。 具體而言,熵解碼部310係將編碼訊號予以熵解碼,來 取出壓縮完畢預測模式訊號,並與來自附近區塊之資訊的 推定値組合,來解碼預測模式訊號。預測模式訊號往預測 部770輸出後,預測部770將生成預測訊號。 又,預測模式訊號往選擇訊號決定部790傳送後,選擇 訊號決定部790將選擇訊號予以輸出者,前述選擇訊號係用 於選擇對應於預測模式訊號之逆變換係數及分割統合資訊 者。選擇訊號係往記憶體781與記憶體782輸出,並自各個 記憶體將第2逆變換係數與分割統合資訊往逆變換部730 輸出。 此選擇性架構,係適應於時間空間性,並基於選擇訊 號以複數個整合單位、或以片單位來執行區塊單位、巨集 塊單位、巨集塊亦可。又,將與在第31圖所述之預測模式 訊號相對應的選擇訊號、及由在第30圖説明過的編碼訊號 所解碼之選擇訊號相組合亦可。 而,依照解碼量子化係數之非零係數的個數、低域區 域之非零係數的個數、非零係數階段的總和、逆量子化部 320輸出之解碼變換輸出yA的總和、低域區域的總和等,將 第2逆變換係數及分割統合資訊予以切換亦可。而,基於解 71 201136319 碼量子化係數的總和之奇偶性(parity,偶數或奇數狀態), 將第2逆變換係數及分割統合資訊予以切換亦可。而,解碼 量子化係數之總和為1時,設為不執行第2逆變換亦可。 而,在本發明實施形態4中,如以實施形態3所示,於 第2逆變換之際,當編财數為顯示表示往預定方向之外插 的預測方法時,將構成解碼變換輸出訊號之複數係數値合 中包含該狀方向之係數値的範圍,予以決定為幻逆變換 之對象。包含預定方向之係數値的範圍意指:具體上係指 包含預定方向起點側的係數値之範圍。 & 〃曰 例如,當編碼參數為顯示表示往略水平方向之外 預測方法時’將構成解碼變換輸出訊號之複數係數値告的 包含横方向之係數値(具體上為左側的係數値)的範备中 決定為第2逆變換之對象。又,當編碼參數為 ' .., 小我不往略 垂直方向之外插的制方法時,將構成解碼變換 之複數係數値當中包含縱方向之係數値(具體上為上’、 係數値)的範圍,予以決定為第2逆變換之對象。 彳彳的 (實施形態5) 本發明貫施形態5之編碼裝置及編碼方法4備 j 換部及變換方法,其係將欲成為聲音資料、靜 種變 ’心衫像資料、 動態畫像資料等編碼對象的訊號,以複數種變換的* _ 進行變換者。本發明實施形態5之編碼裝置及碥石 ° 特徵在於使用固定變換矩陣來進行第1變換,前 ^ ’其 矩陣係以預先所決定之固定變換係數構成者。 疋、*,換 實施形癌的同構成,有時會予以附加同標號而“、 、;阳省略說明。 72 201136319 以第3 2圖來說明本發明實施形態5之變換部及變換方 法。第32圖係顯示本發明實施形態5之變換部81〇構成之一 例的方塊圖。而,本發明實施形態5之編碼裝置與實施形態 1或3相較之下,僅變換部的構成彼此相異,因此以下説明 •憂換部的構成及運行。 如第32圖所示,變換部81〇具備第i變換部2〇〇、分割部 210、第2變換部220、統合部23〇、第2記憶體川、分割統 合貧訊算出部612、第3記憶體621、及第2變換係數導出部 222。變換部81 〇與第19圖顯示之變換部51 〇相較之下,在具 備第1變換部900來替代第丨變換部2〇〇之點上,及不具備 第1記憶體601與第1變換係數導出部2〇2之點上,彼此相異。 變換輸入訊號係往第i變換部9〇〇輸入。第j變換部9〇〇 係以變換矩陣對變換輸入訊號施以第丨變換,來生成第^變 換輸出訊號,前述變換矩陣係以預先所決定的變換係數及/ 或基底函數構成者。第1變換部900放棄可任意取得變換係 數之自由度,而限定於執行規定之變換。藉此,可減輕處 理的複雜度並削減運算量。而,在此,此種變換稱為固定 變換。 而,在第32圖中,雖顯示了具備有用以導出分割統合 資訊、第2變換係數的記憶體及導出部之構成,但與在實施 形態3所説明的情況一樣,即便不是完全的最佳解,亦可基 於經驗或準最佳方法,將該等中任一個或全部予以事先 導出。 本發明實施形態5之變換部81〇中,採用複數變換作為 73 201136319 第1變換,而採用固定變換來變換為第2變換,來執行/ 使用了變換矩陣之變換,該變換矩陣係以因應較小 之(第1變換輸出§fl號的)統計性質而所最佳導出之變換你 構成者。在以下,以第33圖來說明本發明實施形態5么奐換 方法的概念。而,第7圖及第21圖幾乎相同,故僅説明相 異點。 第1變換係數將集合8八取得非常大時,係預先設計成可* 基於集合3八的統計性質來成為最佳形態。藉由將集合%設 计成取付非常大,可消除更新第丨變換部9〇〇之變換係數的 必要’而進行較變換。於是,㈣職人訊號無取得相 異變換係數之自由度’因此變換部⑽無須具備實施形態3 中記載的第1記憶體601及第!變換係數導出部观。、 再者,採用既存規格的變換作為第1變換亦可。·, 亦可使用具MPEG_l/2/4視頻編碼規格_散餘弦變換、 H.264/就規格採用的整數精確度DCT等。該等變換可阶 蝶形構成’且可將對η維輸入之乘法次數減輕二 Log2(n)(實施形態3之第1變換時為ηχη)。 而’既存規格的變換有可能無法對含有變換輸入 之非常大㈣合SA進行嚴密地最佳化。其原因認為是:, 往編碼裝置的輸域衫攝料件等純㈣響= 殊相關,或,當變換輸人訊號為預測誤差等時,由於= 訊號持有特殊相關,因此變換輸入訊號持有特殊相關没 此種相關,係可藉由使其反映在各實施形態變 係數的設㈣,及,她魏W與能量壓 74 201136319 來予以補償。具體而言,第1變換輪出訊號的集合Sc當中, 將以第1變換部900變換集合$8⑴後之集合,予以設為集合 Sc⑴,而將以第1變換部900變換集合%(2)後之集合,予以設 為集合Sc(2)。此時,在第2變換係數導出部222中,分別對 集合Sc⑴、及集合Sc(2)獨立導出第2變換係數。 但’由於第2變換部220係以分割部21 〇將僅訊號一部分 予以輸入之構成,因此若與實施形態3相比,其無相關化與 能量壓縮之性能將會降低些許。但,依據本發明實施形態5 之編碼裝置,無須算出第1變換係數,因此可實現運算量的 降低。又,由於無須具備用以導出第丨變換係數的記憶體及 導出部’因此可實現電路的小型化。 而,本發明實施形態5之變換處理流與實施形態丨或3之 流(flow)幾乎一樣。由於第丨變換為固定變換,因此可省略 第6圖的步驟Sill,而執行步驟S〖12〜步驟SU8的處理。此 時,由於第1變換為既存變換,且未對第丨變換輸入訊號施 以最佳設計,因此將會反映至第2變換的變換係數之最佳化 (步驟S115)。而,步驟S113、步驟SU5係藉由其他方法來決 疋,而不作為本實施形態之一部分來運行亦可。 如以上,藉由本發明實施形態5之編碼裝置及編碼方 法,可抑制變換處理之運算量與變換係數之資料量,亦可 適應於輸入訊號的統計性質之變化。再者,以採用固定變 換,而可削減運算量。 而’不使用H.264/AVC規格採用之整數精確度DCT等乘 法,而以位移與加法運算構成的變數,來作為固定變換, 75 201136319 有時會有變換矩陣的基底大小(範數(n_))不-致的情 況因此,在用了固定變換來作為第〗變換的情況下,宜進 行範數之補正。 第34圖係顯示本發明實施形態5之變形例的變換部 810a構成之一例的方塊圖。變換部與變換部“ο相比, 尚更具備範數補正部94〇。 範數補正部940係對藉由第丨變換部9〇〇所生成的第i變 換輸出喊,施以範數補正。而且,會將範數補正後的訊 號輸出至分割部210。範數補正部940係以基於第丨變換矩陣 所決定之補正參數,將第丨變換輸出訊號予以標準化,來將 第1變換輸出訊號予以補正。補正參數係例如—第(變換矩 陣的範數。 #巳數補正部940係以由用於第i變換之第i變換矩陣a 1 n 所算出的範數,將輸入的第丨變換輸出訊號y ι η予以補正。範 數係藉由以下式12算出。 [數 12] (式 12) N(i) = /^a(i,k)2 V k=l 在此’ a(i,k)係包含於第1變換矩陣Αιη的元素。 而,當第1變換矩陣Α/適應性地變化時,範數亦會结 化,因此範數補正部940係算出範數,而採用所算出的纩卖5 來將第1變換輸出訊號yin予以補正。當第〖變換矩陣 為固定矩陣時,範數補正部940將範數保持在内部兰1 ^ Ηη —Γ 。己隐體 76 201136319 範數補正部940係依照式13將第1變換輸出訊號y,n予以 補正。即,範數補正部94〇係將第丨變換輸出訊號乘上範 數的逆數,來生成補正後的第丨變換輸出訊號〆換言之, 庫巳數補正部940係將第丨變換輸出訊號y|n除以範數,來生成 補正後的第1變換輸出訊號。 [數 13] (^*13) y'.(i) = yl(i)/N(i) 而,採用範數後之乘法及除法,係對每一個包含於第1 變換輸出訊號yin的元素予以執行。即,範數補正部94〇係將 第1變換輸出訊號yin的元素yi(i)乘上範數叫〇的逆數,來生 成補正後的第1變換輸出訊號y,,n的元素y,,(i)。 而,上述範數補正係對分割部21〇之分割後的第丨部分 訊號與第2部分訊號個別地進行亦可。 第35圖係顯示本發明實施形態5之變形例的變換部 81〇b構成之一例的方塊圖。變換部81〇)3與變換部81〇相比, 尚更具備範數補正部941及942。 範數補正部941係對第1部分訊號yiLm施以範數補正。而 且’將範數補正後的第1部分訊號y’|Lm輸出至第2變換部 22〇。具體而言,範數補正部941係以由用於第1變換之第i 變換矩陣Α Γ所算出的範數N,將輸入的第丨部分訊號y l m予 以補正(參考式13,將y’Ji)換讀成y,1L(i),而將y|(i)換讀成 yiL(i))。又,範數N係以上述式12算出。 範數補正部942係對第2部分訊號ymn_m施以範數補 正。而且,將範數補正後的第2部分訊號y,|Hn-m輸出至統合 77 201136319 部230。具體而言,範數補正部942係以由用於第丨變換之第 換矩陣A,所舁出的範數N,將輸入的第2部分訊號 予以補正(參考式13,將乂,•⑴換讀成y,|H(i),而將y|(i)換讀 成ym(i))。又,範數N係以上述式12算出。 而,並非對第1部分訊號y|Lm施以範數補正,而是對第2 變換矩陣A,施以範數補正亦可得到同效果。在以下,説明 對第2變換矩陣八广施以範數補正的情況。 範數補正部941係以由第丨變換矩陣A|n所算出的範 數,將構成第2變換矩陣之第2變換係數予以補正,來導 出修正係數。而,範數係以式12算出。 具體而言,範數補正部941係依照式14,將構成第2變 換矩陣之第2變換係數予以補正。即,範數補正部941 係將第2變換矩陣A,乘上範數的逆數,來生成補正後的第2 變換矩陣A’2"1。換言之,範數補正部941係將第2變換係數 除以範數,來生成為修正係數之補正後的第2變換係數。 [數 14] (式 14) a’2(i,j) = a2(i,j)/N(i) 而,已採用範數後之乘法及除法,係對每一個第2變換 矩陣A,之第2變換係數的元素予以執行。即,範數補正部 941係將第2變換係數aWJ)乘上範數N(i)的逆數,來生成補 正後的第2變換係數a’2(i,j)。 而且,第2變換部220係以補正後的第2變換矩陣A,广將 第1部分訊號丫^”予以變換,來生成第2變換輸出訊號y2m。 如以上,對第1變換後的訊號施以範數補正,可統一變 78 201136319 換矩陣的基底,而可提高變換的精確度。 又,上述範數補正部940(或範數補正部941及942)亦可 執行範數補正,且進行曾在H.264以量子化部執行過的量子 化矩陣(Qmatdx)的重量標度之加權。^量子化矩陣的重 量標度係補正參數之—例。 犯數補正σρ 940係以在量子化部12〇使用的量子化矩 陣,將第1部分訊號予以Λ咕 豆⑽> m 核,來補正第1變換輪出訊號y,n。
具體而言’粑數補正部L 0係依照式15及式16,將第1變換 即,範數補正部940係將第1變換輸 出efL唬1''里广化矩陣之逆數mf’來生成補正後的第1 變換輸出訊號y’r。掭士夕 、。之,範數補正部940係以量子化矩 陣除以第1變換輸出訊號v n . ^ ,來生成補正後的第丨變換輸出 訊號yV。 [數 15] (式 15) y’丨(i) = y丨(i)*mf(i) [數 16] 而,f(i)係自量子化 C矩陣導出的重量標度(weight Scale) 之各元素之値。 而=於第2M奐後再進行後標度(post scale)補正。 將自量子化矩陣算ψ & 出的補正係數mf_2,乘上自統合部 230輸出的訊號y’n,來夺 _ 生成叉換輪出訊號。具體而言,依 照式17及式18 ’將统合接 破y’n予以補正,來生成變換輸 出訊號yn。 79 201136319 [數 17] (式 17) y(i) = y,(i)*mf_2G) [數 18] (式 18) mf_2(j) = l/S(i) 而,S(i)係以式19顯示之矩陣的元素。 [數 19] mf(l) (式 19) ▽mf ⑴2 +…+ mf(4)2 : 0 0 mf(2) 0 mf(4) 在第35圖顯示之變換部810b中,亦可與上述一樣,執 行量子化矩陣的重量標度之加權。而,上述後標度補正係 對藉由第2變換部220所生成的第2變換輸出訊號進行即可。 又,在第35圖之範例中,即便在量子化矩陣的重量標 度之加權中,將第2變換矩陣A2m—而非第1部分訊號y1Lm— 予以補正亦可。 此時,範數補正部941係以量子化矩陣將第2變換矩陣 A2m予以補正。具體而言,範數補正部941係依照式20,將 第2變換矩陣A2m予以補正。如式20所示,範數補正部941 係將每一個第2變換係數a2(i,j)乘上量子化矩陣的元素之逆 婁欠mf(i),及,自量子化矩陣算出的補正係婁i:mf_2(j)。 [數 20] (式 20) a_2 (i,j) = a2(i,j) * mf(i) * mf_2(j) 如以上,藉由將第2變換矩陣A2m —而非第1部分訊號 yiLm—予以補正,亦同樣可得到提高編碼效率的效果。 80 201136319 而,亦可將範數補正與量子化矩陣的加權予以組合。 即,範數補正部941亦可係對第丨部分訊號乃广或第2變換矩 陣A,,施以範數補正與量子化矩陣的補正雙方。 例如,在補正第1部分訊號丫比⑺時,範數補正部94ι係依 照式21將第1部分訊號y|Lm予以補正。具體而言,範數補正 部941係將每-個第1部分訊號y,之元素y1L(i),乘上自第i 變換矩陣A,n所算出的範數N(i)之逆數,及,量子化矩陣的 元素之逆數mf(i) ’來生成補正後的第丨部分訊號y,ir。 [數 21] (式21) y2(i) = y,2(i)/N(i)*mf(i) 又,在補正第2變換矩陣a,時,範數補正部941係依照 式22將第2.4換矩陣a2予以補正。具體而言,範數補正部 941係將每-個第2變換係數㈤,』),乘上自第丨變換矩陣v 所算出的範數N(i)之逆數、量子化矩陣的元素之逆數 ⑴及自i子化矩陣算出之補正係數mf_2⑴來生成補 正後的第2變換矩陣A,2m。 [數 22] (式 22) a’2 仏j)= a2 (i,j)/N(i) * mf(i) * mf_2① 即便如以上之構成,亦可將較適當的第2變換適用於第 1部分訊號。 而在第2變換之有效資料長度低於預定値以下的狀況 下’將構成第1部分訊號之係數値予以下移(shiftd〇wn),來 補正第1變換輸出訊號亦可,該第丨部分訊號係往第2變換部 0輸入者。藉此,可降低第2變換部内部處理的必要精 201136319 確度,來節省電路資源。 又,亦可將構成第1部分訊號或第2變換輸出訊號之係 數値予以下移,以使構成第1變換前的第1部分訊號、或第2 變換後的第1部分訊號(第2變換輸出訊號)之係數値的位 元長度,與構成第2部分訊號之係數値的位元長度成為同 長度。 (實施形態6) 本發明實施形態6之解碼裝置及解碼方法具備一種逆 變換部及逆變換方法,其係聲音資料、靜態影像資料、動 態晝像資料等訊號以複數種變換的組合,將編碼過的編碼 訊號(例如,在實施形態5中所生成的編碼訊號)予以逆變換 者。本發明實施形態6之解碼裝置及解碼方法中,其特徵在 於採用以預先所決定的固定逆變換係數構成之逆變換矩 陣,進行第1逆變換。對於與上述實施形態的同構成,有時 會附加同標號而省略説明。 以第3 6圖來說明本發明實施形態6之逆變換部及逆變 換方法。第36圖係顯示本發明實施形態6之逆變換部1030構 成之一例的方塊圖。而,本發明實施形態6之解碼裝置與實 施形態2或4相較之下,僅逆變換部之構成彼此相異,因此 在以下,就逆變換部之構成及運行加以説明。 如第36圖所示,逆變換部1030具備分割部400、第2逆 變換部410、統合部420、與第1逆變換部1130。逆變換部1030 與第29圖顯示之逆變換部730相較之下,在具備第1逆變換 部1130來替代第1逆變換部430之點上彼此相異。 82 201136319 第1逆變換部1130係對第1解碼變換輸出訊號施以預先 所决疋的固定逆變換處理,來生成解碼變換輸入訊號。第i 疋變換部1130係執行預先所決定的固定逆變換,因此無須 卜^(例如’編碼裝置)取得第1(逆)變換係數。 再者,第1逆變換部1130亦可係將例如:具]^1^(}一 视頻編碼規格的離散餘弦變換、或H.264/AVC規格採 用〃的整數精確度DCT,作為第丨逆變換而使用,來減輕運 算量。 ^ 、,务月貫知形態6之逆變換處理流與實施形態2或4的 2幾乎—樣。由於第丨逆變換為固定逆變換,因此可省略第 :^驟如,而執行步驟S231〜S236、S238之處理。而, 二分割統合資訊之步驟S23卜與取得第2逆變換係數 哪3233,二 時序中 遺衫種通知雜型,因此不限於在本流的 實施,又,並非本實施形態之—部分的必要運行。 法,^上’藉由本發明實施形態6之解碼裝置及解碼方 、商可抑制變換處理之運算量與逆變換係數之資料量,且 :應於輪入訊號的統計性質之變化。再者,採用固定變換, 可削減運算量。 法而,不使用H.264/AVC規格採用之整數精確度DCT等乘 變換而〜轉與加法運算使其誠之變換,來作為固定逆 況。有時會有逆變換矩陣的基底大小(範數)不一致的情 情况^此L在用了範數不一致的逆變換來作為第1逆變換的 ’宜進行範數之補正。 264中’雖在逆量子化部中有進行範數補正處理,但 83 201136319 在本發明實卿態6之解碼裝置中,例如,如第37圖所示, 係對往第1逆變換部113〇的輸入訊號予以執行。即係在進 行第2逆變換後’將第〗解碼變換輸出訊號予以補正。 第3 7圖係顯示本發明實施形態6之變形例的逆變換部 l〇3〇a構成之一例的方塊圖。逆變換部l〇3〇a與逆變換部 1030相比,尚更具備範數補正部1140。 範數補正部1140係對包含藉由統合部42〇所統合之第ι 解馬4刀afl號與第2解碼部分訊號之訊號,施以範數補正, 來生成第1解碼變換輸出訊號。範數補正部i 14〇係以基於第 1逆變換矩陣決定之補正參數,將第丨解碼部分訊號予以標 準化,來補正第1解碼變換輸出訊號。補正參數係例如第i 逆變換矩陣之範數。 範數補正部1140係以自第丨逆變換矩陣Α-ι丨„所算出的 fc數’將、統合後訊號yA,,n予以補正。範數與實施形態卜 樣,係依照式12算出。 而,在編碼訊號含有第1逆變換係數矩陣Α-γ的情況 等’第1逆變換矩陣A_V適應性地變化時,範數亦會變化, 因此範數補正部⑽係算出餘,而⑽算出的範數將統 合後訊號/’,予以補正。當第丨逆變換係數為固定係數時, 範數補正部1140將範數保持在内部記憶體等内即可。 範數補正部1140係進行與實施形態5之變形例的範數 補正部940相反的處理。具體而言,如式23所示,範數補正 部mo係將統合後城y,,n乘上紐,來生絲丨解碼變換 輸出訊號丫、11。 84 201136319 [數 23] 而’式23顯示之乘法,係依每一個含於統合後訊號y、11 之元素加以執行。即’範數補正部1140係將統合後訊號yA,!n 之元素y '(1)乘上範數N(i),來生成第}解碼變換輸出訊號 y Γ之元素/丨⑴。 而’亦可是對為統合部420之統合前的二個輸入訊號之 第2解碼部分訊號、及第1解碼部分訊號’個別進行上述範 數補正。 第38圖係顯示本發明實施形態6之變形例的逆變換部 1030b構成之一例的方塊圖。逆變換部1〇3〇b與逆變換部 1030相比’尚更具備範數補正部1141及1142。 範數補正部1141係對第1解碼部分訊號丨,施以範數 補正。具體而言,範數補正部1141係以自用於第1逆變換之 第1逆變換矩陣A·1广所算出的範數N,將輸入的第丨解碼部分 汛號y ’ιΓ予以補正(參考式23,將yA,(i)換讀成y"|L⑴,而將 y l(i)換讀成y ’1L(i))。而,範數N係以上述式12算出。 範數補正部1142係對第2解碼部分訊號〆,丨h_施以範 數補正。具體而言,範數補正部1142係以自用於第丨逆變換 之第1逆變換矩陣A—Y所算出的範數N,將輸入的第2解碼部 分汛號y ’IHnm予以補正(參考式23,將y^i)換讀成〆出⑴, 而將y ’i(i)換讀成yA,m(i))。 統合部420係將施有範數補正的第1解碼部分訊號與第 2解碼部分訊號予以統合,來生成第1解碼變換輸出訊號。 85 201136319 而,範數N係以上述式12算出。 a而,並非對第2逆變換後的第2解碼變換輪出訊號p m 靶以1已數補正,而是對第2逆變換矩陣d : 可得到同樣的效果。 數補正亦 々範數補正部1H1係以自第1逆變換矩陣ΑΛη所 範數,來補正第2變換係數。而,範數係以式口算出且的 而言,範數補正部⑽係依照式24將第2逆變換係數予= 正。即,範數補正部1141係將第2逆變換係數乘上範數^ 生成補正後的第2逆變換係數。 Α [數 24] (式24) ai’2(i,j) = a.l2(i,j)*N^ 第2逆變換部係以補正後的第2逆變換矩陣V,^ I:,一逆變換,來生成第叫部 逆變irt ’對第1逆變換前的訊號施以範數補正,可統— 奐矩陣的基底,而可提高變換的精確度。 t將第37«顯示之構成與第38圖顯示之構成相比 …於第37圖之構成為單—範數補正部,因而有可安裝 :::的效果。另—方面’第38圖之構成在二個訊號之: ^之^的情況下’有可實現一具備最小限度的有效精確 補正^的效果’該最小限度的有效精確度係因應 了各個有效精確度者。 之數補正—樣,亦可以在第37圖或第38圖顯示 已1正邛,來執行曾在H 264以逆量子化部執行過的量 201136319 子化矩陣(Qmatrix)之重量標度的加權處理。即,採用量子 化矩陣的重量標度將第1解碼部分訊號予以加權,來補正第 1解碼變換輸出訊號亦可。 範數補正部1140係進行與實施形態5之變形例的範數 補正部940執行之處理相反的處理。具體而言,範數補正部 1140係將統合後訊號丫、11乘上量子化參數,來生成第1解碼 變換輸出訊號yT。而,如式25所示,此與以補正係數mf除 統合後訊號yAy的方法等價。 [數 25] (式25) tOKW/mfCi) 而,補正係數mf係以式16表示。 又,如第38圖所示,對第1解碼部分訊號施以量子化矩 陣的定比(scaling)時,宜於第2逆變換前,進行後標度逆 補正。 具體而言,將自量子化矩陣算出之補正係數mf_2的逆 數乘上第2解碼變換輸出訊號yA2m,來生成逆補正後的第2 解碼變換輸出訊號y"’2m。而,如式26所示,此與以補正係 數mf_2除第2解碼變換輸出訊號yA2m的方法等價。 [數 26] (式 26) A(i)42(i)/mf_2G) 而,補正係數mf_2(j)係以式18及式19表示。 又,在第38圖之範例中,即便在量子化矩陣的重量標 度之加權,將第2逆變換矩陣A_12m_而非逆變換後的第2解 碼變換輸出訊號yA’1Lm—予以補正亦可。 87 201136319 此時,餘補正部1141係以量子化矩陣,來補正第2逆 變換矩陣AV。具體而纟,範數補正部1141係依照式 將第2逆變換矩陣AV予以補正。如式27所示,範數補正部 1141係將每-個第2逆變換係數a,丨灿除以量子化矩陣的 元素之逆數mf⑴、及自量子化矩陣算出的補正係數<如。 [數 27] (式27) a·、(i,j) = a—’2(i,j)/mf(i)/mf_2G) 如以上,即便藉由將第2逆變換矩陣八-,广—而非逆變換 後的第2解碼變換輸出訊號/’iLm—予以補正,亦同樣地可 得到提高編碼效率的效果。 而,亦可將範數補正與量子化參數的加權予以組合。 即,範數補正部1141係對逆變換後的第2解碼變換輸出訊號 或第2逆變換矩陣a-i,,施以範數補正與量子化矩陣 的加權雙方亦可。 例如,在補正逆變換後的第2解碼變換輸出訊號yA,itm 時,範數補正部1141係依照式28,將逆變換後的第2解碼變 換輪出訊號yA’iimT以補正。具體而言,範數補正部1141係 將每—個逆變換後的第2解碼變換輸出訊號yA,1Lm之元素 yA’iL(i),乘上自第1逆變換矩陣A-\n所算出的範數N(i),再 除以量子化矩陣的元素之逆數mf(i),來生成第1解碼部分訊 oj- Λ 唬y ILm 〇 [數 28] (式2 8) U)=夕,&①*那)/〇邱) 又,在補正第2逆變換矩陣八-|,時,範數補正部ll4i 88 201136319 係依照式29,將第2逆變換矩陣Α·ι,予以補正。具體而言, 範數補正部1141係將每一個第2逆變換係數a-i2(丨,乘上自 第1逆變換矩陣ΑΛη所算出的範數N(i),再除以量子化矩陣 的元素之逆數mf(i)、與自量子化矩陣算出的補正係數 mf_2(j) ’來生成補正後的第2逆變換矩陣八-丨,/。 [數 29] (式29) a 即便是如以上的構成,亦可將較適當的第2逆變換適用 於第2解碼變換輸出訊號。 而,在變換輸入訊號的資料量很多時,省略範數的補 正處理與重量標度的加權處理來削減運算量,而僅在變換 輸入訊號的資料量很少時執行該等處理亦可。而,範數的 補正處理與重量標度的加權,係限於在補正對象的訊號為 非零的情況下,來削減運算量亦可。 而,變換輸入訊號的資料量很多的情況係指:具體上 當變換的區塊尺寸定義成如:4x4像素、8x8像素、16x16像 素、32x32像素等複數種類時,認為32x32較4x4或8x8資料 量為多。或,亦可想成係指變換矩陣的非零係數很多的 情況。 而,在變換輸入訊號的資料量很多的情況下,對於範 數的補正處理與重量標度的加權處理,不用乘法,而是像 僅從位移與加法來予以近似,而削減乘法次數亦可。 而,為了正確表現數値所需要的記憶體之資料尺寸(在 此令為必要位元長度)’ 一般係藉由矩陣運算來增加。由於 89 201136319 弟2解碼部分訊號未進行第2逆變換,而黑—> 、 力一万面由於第1解 碼部分訊號在第2逆變換部410中有進行乘法, 〉 因此會有必 up)M位元量亦可。 要位元長度相異的可能性。因此,當在第2逆變換部彻中 必要位元長度增加Μ位元時,第2解碼部分訊號上移( 例如,在第36圖的構成中,進行以往第【逆變換部⑽ 輸入前的時間點使位元長度一致的補正,可無須切換第丄逆 變換部1130,而將第1逆變換部113〇的構成予以簡略化。 又’在第37®顯*之構成巾,進行則域數補正部1刚輸 入前的時間點使必要位元長度-致的補正,可無須將範^ 補正部H40的處理切換成第2解碼部分訊號與第丨解碼^分 訊號’而將範數補正部1140的構成予以簡略化。 又,在第38圖顯示之構成的情況下,由於會輪入第2解 碼部分訊號的範數補正部1142 ’其輸入訊號的必要位元長 度係在很低的狀態’因此可將内部的訊號處理所需要的必 要位元長度抑制得很低,來節省電路資源。或,依輸入% 號的必要位元長度之低分量,在範數補正部丨142施以乘 法,而提高範數補正量及重量標度的加權量之有效精確产 亦可’此時’可提升範數補正與重量標度的加權之運算精 確度。 或者,將欲往第2逆變換部410輸入的第2解喝變換輸出 訊號預先予以下移N位元,來降低第2逆變換部41〇之内部處 理的必要精確度,而節省電路資源亦可。而,當藉由第2逆 變換部410之變換而增加的位元長度為Μ位元時,將n設定 90 201136319 為較Μ小亦可。此時,當於往第2逆變換的輸入時進行n位 兀之下移時,係對第2逆變換的輸出施以M_N位元之下移。 如此一來,在使第2逆變換之有效資料長度低於預定値 以下的條件下,將構成欲往第2逆變換部410輸入的第2解碼 义換輪出矾號之係數値予以下移,來補正第2解碼變換輪出 訊號亦可。藉此,可降低第2逆變換部41〇之内部處理的必 要精確度,來節省電路資源。 又亦可將構成第1解碼部分訊號或第2解碼變換輪出 訊號之係數値予以下移,以使構成第旧碼部分訊號或幻 =碼變換輪出訊號之係數値之位元長度,與構成第2解碼部 分訊號之係數値之位元長度為同長度。 而,在本實施形態所述之位元操作的位元長度,係^ 制成序列單位、GQP單位、框單位、區塊單位亦可。基: 第2解碼變換輸出減_塊之有效位元長度(某瞬間實際 正在消費記憶體的尺寸),藉由於區塊單位㈣位元長度,、 :提高運算精確度。例如,當第2解碼變換輸出的區塊之有 效位凡長度很長時’將往第2逆變換部训輸入前的下移量 増大:而非為前述情況時,將往第2逆變換部41〇輪入前的 下移里減小亦可。 饮又’第1變換及第1逆變換係將離散餘弦變換與離散正 ^換予以⑽之構射'可。切換旗標資訊係在編碼裝置 夕工成編碼城,而在解碼裝置中來解碼,並從編碼裝 :通知解碼裝置。離散餘弦變換與離散正弦變換係位相相 位差的後的變換,因此使第2變換與仏逆變換係數持 201136319 有相互依pi/2位差後的關係’而削減逆變換係數的資訊量 亦可。 (實施形態7) 本發明實施形態7之編碼裝置及編碼方法具備一種變 換部及變換方法,其係將欲成為聲音資料、靜態影像資料、 動態畫像資料等編碼對象的δΠ*戒,以複數種變換的組合施 以變換。本發明實施形態7之編碼裝置及編碼方法中,其特 徵在於對多維訊號施以分離型及非分離型的變換。對於與 上述實施形態的同構成’有時會予以附加同標號而省略 說明。 本發明實施形態7之編碼裝置中’變換輪入訊號、第1 變換輸出訊號、第2部分訊號、及變換輸出訊號係Ρ(Ρ為2以 上的整數)維訊號。第2變換部220可以是將Ρ維訊號予以輸 入輸出、或亦可是將一維訊號予以輸入輸出的其中任一 者。當第2變換部220將〆維訊號予以輸入輸出時,第2變換 部220與實施形態i、3及5相同。 分割部210依照分割統合資訊,將P維的變換輸入訊號 分割成第1部分訊號與第2部分訊號後’再將第1部分訊號更 換排列成一維。並將更換排列的順序資訊追加性地儲存於 分割統合資訊。 統合部230係依照分割統合資訊,將第2變換輸出訊號 與第2部分訊號予以統合,來生成變換輸出訊號。此時,統 合部230基於已儲存於分割統合資訊之更換排列資訊,將— 維訊號之第2變換輸出訊號更換排列成卩維訊號後,將p維的 92 201136319 第2變換輸出訊號與p維的第2部分訊號予以統合。而,當第 2變換部220將P維訊號予以輸入輸出時,不進行往—維訊號 的更換排列亦可。 再者,此時,第2變換部220係進行分離型(水平軸方向 與垂直軸方向的二階段變換)變換亦可。即,第2變換部220 可在水平方向依行單位進行變換,而在垂直方向依列單位 進行臭換。而,水平與垂直之順序顛倒亦可。 又,兀素數為一個行或列單位之變換,同等於未施以 貫貝處理者,因此略過處理亦可,或,在此處進行後段的 乾數補正之處理亦可。χ,行變換的變換係數與列變換的 變換係數,可相同’亦可相異。行變換的變換係數在所有 的仃可以是以同變換係數,來削減變換係數的資料量,亦 可疋於行單位用相異的變換係數,來使適應於行單位的統 计性質之差異而提高變換性能。關於列變換亦與行變換一 樣可在全列使用同變換係數,或,亦可使用相異的變換 係數。 、 S玄等相異係以變換的輸入時間點將Ρ維訊號更換排列 成維的非分離型,或者,係採取在變換内部以一維單位 進行處理的分離型之構成。 而,亦可在第2變換係數的一部分設定零,來削減其係 數的乘法處理。欲設定成零的缝,如上述乃設為能量低 的70素。尤其,當第2變換矩陣的大小與第1變換矩陣的大 小一樣時,在分割部21〇中,變得無須將往第2變換部22〇輸 入的Λ號(第1部分訊號)及不輸入的訊號(第2部分訊號)予 93 201136319 以區別。因此,亦會變成不需要統合部230。 即’如以第8圖(b)顯示,在未使用分割部2丨0與統合部 230的情況下,亦可將其特徵設為:就對應於非第2變換對 象之元素的變換矩陣之行,採用對角元素為ι而非對角元素 為0之變換矩陣,來削減非該第2變換對象之元素所消耗的 乘法處理。而設為第2變換對象外者,亦可設為對應於第丄 變換輸出當中能量小料素之行。或者,亦可將對應於第i 變換輸出之相互相關的小元素之變換矩陣的元素,設定 為零。 '° 以第39圖來説明關於第2變換部挪前後的運行輸入 有4x4x2的二維區塊訊號(輸入點數n=32)的情況。 P維(例中為P=3)的第1變換輸出訊號,在分割部21〇中 係依照分割統合資訊而分割成第!部分訊號與第2部分訊 號。第2變換部22〇係以第2變換矩陣,對第丨部分訊號施以 第2變換,來生成第2變換輸出訊號。統合部23〇係將第2變 換輪出訊號與第2部分《料統合,㈣為魏輸出訊號 予以輪出。 首先,就第1變換部200執行的第1變換加以說明。第工 變換部200係對p維輸入訊號(例如’複數二維變換輸入訊號) 的各個輸入訊號施以第丨變換,來生成複數第1變換輸出 訊號。 如第39圖所示,對p維訊號之變換輸入訊號,複數次地 適用P-1維的第1變換,來生成第1變換輸出訊號亦可。例 士 在以第39圖顯示之範例中,第1變換部2〇〇係對4Χ4χ2的 94 201136319 三維變換輸入訊號施以二次4x4的二維第1變換。 而,第39圖中’為了使説明淺顯易懂,顯示有二個第1 變換部200,但只要一個第1變換部2〇〇進行二次二維第^變 換即可。又,實際上變換部具有二個第1變換部2〇〇,而二 個第1變換部200分別進行各一次二維第1變換亦可。 或者,第1變換部200係對P維的變換輸入訊號進行—次 P維第1變換亦可。P維的第1變換可為分離型,或亦可為非 分離型。 其次’就第2變換部220執行的第2變換加以説明。第2 變換部220係對包含複數第丨部分訊號的批次訊號,批次進 行第2變換,該複數第1部分訊號係複數第丨變換輸出訊號的 一部分。 第40圖係將分離型構成的第2變換之資料流予以概念 性顯示之圖。當輸入有包含二個二維區塊的訊號時,首先, 第2變換部220係在二維訊號的水平方向進行變換(S5〇1)。其 次,第2變換部220在垂直方向進行變換(S5〇2)。最後,第2 變換部220係在跨越區塊的方向進行變換(S5〇3)。而該順 序為一例,水平、垂直、跨越區塊的方向之處理順序並非 限於此。又,分離型構成的第2逆變換亦與第4()圖相同,係 以水平方向、垂直方向、跨越區塊的方向等之順序進行逆 變換。逆變換的順序亦非限於此。 如此-來’本發明實施形態7之第2變換部22〇係對?維 的第1部分訊號施以分離型的第2變換,即,對各個p維進行 P次-維變換。換言之,在第40圖顯示之範例中,係對三維 95 201136319 的第1部分訊號施以分離g第2變換,即,對各個三維進行 三次一維變換。 由於本發明實施形態7之變換處理流與實施形態1、3 5幾乎一樣,因此,在此處以第6圖加以説明。 而,輸入至本發明實施形態7之編碼裝置的輸入訊號’ 例如係對應於構成輸入影像或預測誤差影像之複數區塊的 各個區塊之影像訊號。具體而言,如第41圖所示,複數區 塊包含輸入影像或預測誤差影像的亮度塊或色差塊。或 者’如第42圖所示,複數區塊在輸入影像或預測誤差影像 内’包含彼此在空間上相鄰接的區塊亦可。 «〜,乐1雯換係數導出部202決定第1變換係數(步髮 sui)。其次,第1變換部200對ρ維的變換輸入訊號施以第 隻換,來生成第1變換輸出訊號(步驟SU2广此時,第丨變杉 係以較輪入訊號的維為低之維,執行複數次亦可。 其次’分割統合資訊算出部612決定分割統合資 =113)。接著’分割部21〇基於分割統合資訊,將第 ^出訊號分割成第1部分訊號與㈣分訊號(步驟S1 部分訊號的相關能量變得較 唬的相關能量還大來進行分割。 第2變_數導出部222基於第i部分訊 L集,之統計性質,決定第2變換係數(步驟S1 :。| 第2變換部220係以第2變換矩pi 且, ,,^ 4換矩陣,對第1部分訊號施^ > 來生成第2變換輸出訊號(步驟su6)。 ^ 最後,統合部230將第2變換輸出訊號與第2部分訊號^ 96 201136319 以統合’來生成變換輸出訊號(步驟SI 18)。 而,當第1變換為固定變換時,可省略步驟Sill。而, 步驟S111、步驟S113、步驟S115係以其他方法決定,而非 作為本實施形態之一部分予以運行亦可。又,當第2變換為 分離型時,在步驟S114中分割部210將第1部分訊號從p維更 換排列成一維’在步驟S118中統合部230將第2變換輸出訊 號從一維更換排列成P維後,予以統合。 而’如上述’本實施形態中,多維的變換輸入訊號係 亮度訊號(Y訊號)及色差訊號(U訊號、V訊號)亦可。第41圖 係將多維的變換輸入訊號為YU V訊號時的資料流之一例予 以概念性顯示之圖。 亮度訊號(Y訊號)與二個色差訊號(U訊號七V訊號)在 第1變換部200中,係同時進行三維的第1變換,或者,個別 地進行二維的第1變換。 第2變換部220,係於γ訊號之第1變換輸出訊號、u訊 號之第1變換輸出訊號、及V訊號之第i變換輸出訊號當中, 對能量大的低域側區域之第丨部分訊號施以第2變換,來生 成第2變換輸出訊號。此時,第2變換部22〇例如係以第4〇圖 所示之順序’對複數第2變換輸出訊號批次進行第2變換。 而且’將第2變換輸出訊號及未曾適用第2變換之區域 的第2部分訊號予以統合,來生成變換輸出訊號。γ訊號之 變換輸出訊號、U訊號之變換輸出訊號、及v訊號之變換輸 出訊號,係分別個別地予以掃描、量子化。而,如在實施 形態11所述,對第2變換輸出訊號進行與第2部分訊號相獨 97 201136319 立的掃描、量子化亦可。 又’本實施形態中,多維的變換輸入訊號係在空間上 相鄰接的區塊之影像訊號亦可。第42圖係將多維的變換輸 入訊號為在空間上相鄰接的區塊之訊號時的資料流之—例 予以概念性顯示之圖。 在空間上相鄰接的複數個小區塊(在第42圖顯示之範 例中為四個),係藉由第1變換部個別地進行第i變換。 其次’第2變換部220係於各個第戦輸出訊號當中,對包 含能量大的元素之低域側區域的以部分訊號,施以第㈣ 換’來生成第2變換輸出訊號。此時,第2變換部220例如係 以第40圖所示之順序,對複數第2變換輪出訊號批次進行第 2變換。 而且,將未曾適用第2變換輸出訊號與第2變換的區域 之第2部分訊號予以統合,來生成變換輸出訊號。小區塊的 變換輸出訊號係分別個別地予以掃描、量子化。而,如在 實施形態η所述,對第2變換輪出訊號進行與第2部分訊號 相獨立的掃描、量子化亦可β 如以上,藉由本發明實施形態7之編碼裝置及編碼方 法,可抑制變換處理的運算量與變換係數的資料量,並適 應於輸入訊號的統計性質之變化。尤其,對ρ維(Ρ為2以上 的整數)的輸入訊號很有效。 而,在本發明實施形態7中,第2變換部22〇進行非分離 型第2變換亦可。換言之,第2變換部220對ρ維的第1部分訊 號施以非分離型第2變換亦可,即,將ρ維訊號更換排列成 98 201136319 一維訊號,並對更換排列後的訊號進行變換。具體上與在 實施形態1等所説明的情況相同,因此在此省略説明。 (實施形態8) 本發明實施形態8之解碼裝置及解碼方法具備一種逆 變換部及逆變換方法,其係聲音資料、靜態影像資料、動 態畫像資料等訊號以複數種變換的組合,將編碼過的編碼 訊號(例如,在實施形態7中所生成的編碼訊號)予以逆變換 者。本發明實施形態8之解碼裝置及解碼方法,其特徵在 於:對多維訊號進行分離型及非分離型的逆變換。對於與 上述實施形態的同構成,有時會予以附加同標號而省略 説明。 本發明實施形態8之解碼裝置中,解碼變換輸出訊號、 解碼變換輸入訊號、解碼訊號、及預測訊號,係P維訊號(P 為2以上的整數)。即,解碼變換輸出訊號、第2解碼部分訊 號、第1解碼變換輸出訊號、及解碼變換輸入訊號係P維訊 號。第2逆變換部410可以是將P維訊號予以輸入輸出,或 者,可以是將一維訊號予以輸入輸出的其中任一者。當第2 逆變換部410將一維訊號予以輸入輸出時,第2逆變換部410 與實施形態2、4及6相同。 分割部400依照分割統合資訊,將P維訊號分割成第2 解碼變換輸出訊號與第2解碼部分訊號後,再將第2解碼變 換輸出訊號更換排列成一維。並將更換排列的順序資訊追 加性地儲存於分割統合資訊。 統合部420係依照分割統合資訊,將第1解碼部分訊號 99 201136319 與第2解碼部分訊號予以統合,來生成第1解碼變換輸出訊 5虎此時’統合部420基於已儲存於分割統合資訊之更換排 列資訊,將—維訊號之第1解碼部分訊號更換排列成P維訊 號後將P維的第丨解碼部分訊號與p維的第2解碼部分訊號 予以”先合。而,在第2逆變換部410將P維訊號予以輸入輸出 不進行往維訊號的更換排列亦可。此時的資料 流之概念圖係第13B圖。 此砰,第2逆變換部410係進行分離型(水平軸方 向與垂絲方向的二階段變換)變換亦可。此 概念圖係第圃B J貝·H/筑之 位Π P,第2逆變換部在水平方向依行單 位進行逆變換, 平 、纟垂直方向依列單位進行逆變換 1+㈣i之順序顛倒亦可。 施以ί質=素數為一個行或列單位之變換’同等於未 的範數補正之Lr可略過處理,或者,在此進行後段 換的逆變換;Γ 又’行變換的逆變換係數與列變 迚變換係數,可相同,亦可相 數在所有的行可以a m換的逆變換係 的資料量,=疋以同逆變換係數,來肖,㈣ 應m 讀行單仙㈣的«換餘,來使適 ‘";τ早㈣統計性質之;I:異而提高變純能。M 換亦與行變換_揭讀關於列變 可使用相異的逆變換係數。 次亦 列成逆變換的輸入時間點針維訊號更換排 單位進行處^、型’或者,係採取在逆義内部以1 仃處理的分離型之構成。 100 201136319 而,亦可在第2逆變換係數的一部分設定零,來削滅其 係數的乘法處理。欲設定成零的係數,如上述乃設為能量 低的元素。尤其,當第2逆變換矩陣的大小與第1逆變換矩 陣的大小一樣時,在分割部400中,變成無須將往第2逆變 奐輸入的s礼號(第2解碼變換輸出訊號)及不輸入的訊 唬(第2解碼部分訊號)予以區別。因此,亦會變成不需要統 合部420。 即,在未使用分割部4〇〇與統合部42〇的情況下,亦玎 將其特徵設為:對第2逆變換係數設定複數個非零係數,來 削減4係數耗費的乘法處理。又,此時,將零係數予以設 定者,可以是設為能量小的位置,亦可以是僅設為相互相 關小的係數。而,在將非對角元素全部設為〇的基底中,對 角元素係設為1。 第44圖係將本發明貫施形態8之逆變換部的資料流予 以概念性顯示之圖。 P維(在第44圖的範例中為4X4X2的三維訊號、輸入點數 n=32)的解碼變換輸出訊號,在分割部4〇〇係依照分割統合 貧讯,分割成第2解碼變換輸出訊號(輸入點數爪%)及第2 解碼部分訊號。第2逆變換部41〇係以由第2逆變換係數構成 之第2逆變換矩陣,對第2解碼變換輸出訊號施以第2逆變 換’來生成第1解碼部分訊號^即,第2逆變換部仙係對包 含第2解碼變換輸出訊號(在第44圖的範例中為二個一維第 2解碼變換輸出訊號)之批次訊號,批次施來 生成複數第1解碼部分訊號,前述第2解碼變換輪出訊號係 101 201136319 對應於複數編碼訊號的一部分者。 統合部420係將第1解碼部分訊號與第2解碼部分訊號 予以統合’來生成第i解碼變換輸出訊號。而 上逆變 換部430係以由第!逆變換係數構成之以逆變換 碼變換輸出訊號施以第丨逆變換,、 訊號。gR咏 4 木生成解碼變換輸入 二㈣《部43。係將包含複數第丨部分訊號的各 ^訊號、及對應之㈣碼部分訊號她解碼變換 :戒,分別進行第1逆變換,來生成解碼變換輸入訊號。 號時第2逆變換部410在輸入有包含二個二維區塊的訊 與第_-樣,係以水平方向、垂直方向、跨越區 、方向等之順序進行逆變換。逆變換之順序非限於此。 丨逆二:第4二_示,第1逆變換部 可。,、以複數_人地適用’來生成解碼變換輪入訊號亦 例如’在第44圖顯示之範例中,第i逆變換部侧系對* X/2的三維第1解喝變換輸出訊號,進行二次4χ4的二維& 逆變換。 ^ 第44圖中,為了使説明淺顯易懂,顯示有二個第1 逆隻換部43G,但只要__個第i逆變換部柳進行二次 1變換gp 、内不 一、可。又,實際上變換部具有二個第1逆變換部43〇, 。固第1逆變換部43〇分別進行各一次二維第丨變換亦可。 或,第1逆變換部43〇係對p維的變換輸入訊號進 ^ P維第1變拖亦可 -人 交換7ΓΤ。p維的第1變換可為分離型,或亦可 分離型。 邪 如此—來’本發明實施形態8之第2逆變換部41〇係對p 102 201136319 維的第2解碼變換輸出訊號,施以分離型第2逆變換,即, 對各個P維進行P次一維變換。換言之,在第44圖顯示之範 例中,對三維的第2解碼變換輸出訊號,施以分離型第2逆 變換,即,對各個三維進行三次一維變換(第40圖參考)。 由於本發明實施形態8之逆變換處理流與實施形態2、 4、6幾乎一樣,因此,在此處以第14圖加以説明。 而’輸入至本發明實施形態8之解碼裝置的編碼訊號, 例如係將對應於構成輸入影像或預測誤差影像之複數區塊 的各個區塊之影像訊號予以編碼過的訊號。具體而言,如 第45圖所示’複數區塊包含輸入影像或預測誤差影像的哀 度塊或色差塊。或者,如第46圖所示’複數區塊在輪入景< 像或預測誤差影像内,包含彼此在空間上相鄰接的區塊 亦可。 首先,分割部400取得分割統合資訊(步驟S23丨)。其次, 分割部400依照分割統合資訊,將解碼變換輸出訊號分割成 第2解碼變換輸出訊號與第2解碼部分訊號(步驟S232)。 其次,第2逆變換部41〇取得第2逆變換係數(步驟 S233)。而且,第2逆變換部41〇係對第2解碼變換輸出訊號 施以第2逆變換’來生成第1解碼部分訊號(步驟S234)。 接著,統合部420依照分割統合資訊,將第丨解碼部分 訊號與第2解碼部分訊號^以統合,來生成以解碼變換輪 出訊號(步驟S236)。 再來,第1逆變換部430取得第1逆變換係數(步驟 S237)。而且,第1逆變換部43G係對第1解碼變換輸出訊號 103 201136319 施以第1逆變換’來生成解碼變換輸入訊號(步驟S238)。 而,取得分割統合資訊之步驟S231、取得逆變換係數 之步驟S233、S237等,如前述有多種通知的類型,因此不 限於在本流的時序中實施,又,並非本實施形態之一部分 的必要運行。又’當第2逆變換為分離型時,在步驟S232 中分割部400將第2解碼變換輸出訊號從p維更換排列成一 維’在步驟S23 6中將第1解碼部分訊號從一維更換排列成p 維後,予以統合。 而,如上述,本實施形態中,多維的解碼變換輸出訊 號係党度訊號(Y訊號)及色差訊號(U訊號、V訊號)亦可。第 4 5圖係將多維的解碼變換輸出訊號為YUv訊號時的逆變換 之資料流之一例予以概念性顯示之圖。 Y訊號之解碼量子化係數、U訊號之解碼量子化係數、 及v訊號之解碼量子化係數,在逆量子化部32〇中予以逆量 子化,來生成解碼變換輸出訊號。逆量子化係分別對γυν 訊號進行亦可’如在實施形態,係就輸入至第2逆變 換部410的部分予以整合而逆量子化亦可。 第2逆變換部410係對解碼變換輸出訊號當中能量大的 低域側區域之第2解碼變換輸出訊號,施以第2逆變換,來 生成第1解碼。卩分。第丨解碼部分訊號係將第2逆變換未 曾執行過的部分之第2解碼部分訊號予以統合,來生成第i 解碼變換輸出。 ▲第1逆變換部柳係對第1解碼變換輸出訊號施以第i逆 變換’來生成γ訊號、⑽號、v訊號的解碼變換輸入訊號。 104 201136319 第1逆變換部430係將整合了 YUV訊號的三維變換批次予以 執行亦可,或者,將YUV訊號個別地進行二維變換亦可。 而’如在實施形態11所述’對於適用第2逆變換之部分(第i 解碼部分訊號),與不適用之部分(第2解碼部分訊號),施以 獨立的逆掃描、逆量子化亦可。 又’本實施形態中’多維的解碼變換輸出訊號係在空 間上相鄰接的區塊之影像訊號亦可。第46圖係將多維的解 碼變換輸出訊號為在空間上相鄰接的區塊之訊號時的資料 流之一例予以概念性顯示之圖。 對應於在空間上相鄰接的複數個小區塊(在第46圖顯 不之範例中為四個)的解碼量子化係數,係在逆量子化部 320中予以逆量子化,來生成解碼變換輸出訊號。逆量子化 係對對應於四個小區塊的資料個別地予以執行。或,首先 將對應於輸入至第2逆變換部410的部分之資料予以逆量子 化後,將對應於四個小區塊的資料當中,未輸入至第2逆變 換部410的部分個別地予以逆量子化亦可。 第2逆變換部41〇係對對應於四個小區塊的解碼變換輸 出訊號當中,包含能量大的元素的低域側區域之第2解碼變 換輸出訊號’施以第2逆變換’來生成第i解碼部分訊號。 而且,將為第2逆變換之輸出的第丨解碼部分訊號、及未曾 適用第2逆變換的區域之第2解碼部分訊號予以統合,來生 成第1解碼變換輪出訊號。 第1逆變換部43〇㈣第旧碼變換輸出訊號的各個小 區塊早位施以第【逆變換,來生成解碼變換輸入訊號。而, 105 201136319 如在實施形態11所述’對適用第2逆變換之部分(第1解碼部 分訊號)’與未適用第2逆變換之區域(第2解碼部分訊號), 進行獨立的逆掃描、逆量子化亦可。又,因應適用第2逆變 換的區域之量子化係數的狀悲,將對於未適用第2逆變換的 區域之逆掃描、逆量子化、熵解碼的内部狀態變數予以切 換亦可。 又,如第37圖及第38圖所示,補正第1逆變換矩陣之範 數的處理係在第1逆變換之刖執行。具體而言,執行第2逆 變換的部分係在第2逆變換之後執行,而未執行第2逆變換 的部分係在第1逆變換之前的任一時間點執行亦可。 如以上,藉由本發明實施形態8之解碼裝置及解碼方 法,可抑制變換處理的運算量與逆變換係數的資料量,並 適應於輸入訊號的統計性質之變化。尤其,對於p維(p為2 以上的整數)的輸入訊號很有效。 而 ,在本發明實施形態8中,第2逆變換部4H)係進行非 分離型第2逆變換亦可。換言之,第2逆變換邹糊係财維 的第2解碼變換輸出訊號施以非分離型第
矛丄楚換,即,將P 因 維sfl號更換排列成一維訊號,並對更換排列,炎的=虎. 變換亦可。具體上與在實施形態1等所説明 β W況相同 此在此省略説明。 (實施形態9) 本發明實施形態9之編碼裝置及編碼方 、 去具備一種變 換部及變換方法,其係將欲成為聲音資料、 靜態影像資料、 動態衫像資料等編瑪對象的sfl號,藉由雜〜 I數種變換的組 106 201136319 合,施以變換者。本發明實施形態9尤編碼裴置,其特徵在 於:以第1變換及第2變換之至少一方,來執行分離型變換。 對於與上述實施形態的同構成,有時會予以附加同標號而 省略説明。 本發明貫把形怨9之編碼裝置及編碼方法中,輸入訊號 係P維讯號(P為2以上的整數)。因此,變換輸出訊號、解碼 變換輸出訊號、解碼變換輸入訊號、解码訊號、及預測訊 號亦是P維。 本發明實施形態9之第1變換部2 00,係在運算處理的一 部分或全部中,使用固定變換處理。具體而言,例如,使 用具MPEG-1/2/4視頻編碼規格的離散餘弦變換或、 H. 264/AVC規格採用的整數精確度DCT。或,將以實施形態 I、 3、5、7所說明之變換,作為分離型變換的一部分來使 用亦可。 以第47圖來説明將4X4的二維訊號作為變換輸入訊號 來輪入後的情況。第47圖係將本發明實施形態9之變換部的 身料流之一例予以概念性顯示之圖。 第1變換部2 00係對P維訊號(在第4 7圖顯示之範例中為 Ρ=2)的變換輸入訊號施以分離型變換的第丨變換,來生成第 1變換輸出訊號。分離型變換的第1變換部2〇〇係進行將行方 向之變換予以執行的第1座標轴變換,其次,進行將列方向 之變換予以執行的第2座標軸變換。而,亦可是將行方向與 列方向之處理予以交換之構成。 ηχη的二維訊號之輸入,其維數為ηχη,由於變換的運 107 201136319 算量會變龐大,因此宜採取分離型構成。在分離型中,在 行或列的一個變換單位中維數為η,由於與非分離型之變換 的維數ηχη相較為低,因此可減輕運算量。分割部210、第2 變換部220、及統合部230之運行與實施形態1、3、5、7相 同,故而省略説明。 以第48Α圖說明本發明實施形態9之變換部110執行的 變換方法。第48Α圖係顯示本發明實施形態9之變換部110 運行之一例的流程圖。 首先,第1變換部200係對變換輸入訊號施以第1變換, 來生成第1變換輸出訊號(步驟S112)。步驟S112含有下列二 個步驟。 具體而言,首先,第1變換部200將變換輸入訊號往第1 座標軸方向變換,來生成第1座標軸變換訊號(步驟S112a)。 而且,第1變換部200將第1座標軸變換訊號往第2座標軸方 向變換,來生成第2座標軸變換訊號(步驟SI 12b)。如此所生 成的第2座標軸變換訊號相當於實施形態1、3、5、7之第1 變換輸出訊號。 其次,分割統合資訊算出部612決定分割統合資訊(步 驟S113)。而且,分割部210係基於分割統合資訊,將第1變 換輸出訊號之第2座標軸變換訊號,分割成第1部分訊號與 第2部分訊號(步驟S114)。此時,分割部210係使第1部分訊 號的相關能量變得較第2部分訊號的相關能量還大來進行 分割。再者,分割部210將P維(P為2以上的整數)的第1部分 訊號更換排列成一維。 108 201136319 接著,第2變換係數導出部222基於第1部分訊號的局部 集合之統計性質’來決定第2變換係數(步驟S115)。而且, 第2變換部220以第2變換矩陣對第1部分訊號施以第2變 換,來生成第2變換輸出訊號(步驟SU6)。 最後,統合部230將一維訊號之第2變換輸出訊號更換 排列成P維,並將第2部分訊號,以及自一維更換排列成p 維後的第2變換輸出訊號予以統合,來生成變換輸出訊號 (步驟S118)。 而,如第48B圖所示,分割統合資訊之決定(步驟su3) 及第2變換係數之決定(步驟S115)係以其他方法決定,而非 作為本實施形態之一部分予以運行亦可。 又’前述第1座標軸變換及第2座標軸變換(步驟 S112a、步驟S112b)係實施形態1、3、5、7記載之第1變換 亦可。前述第1座標軸變換及第2座標軸變換(步驟S112a、 步驟S112b)例如係具MPEG-1 /2/4視頻編碼規格的離散餘弦 變換’或’ H.264/AVC規格採用的整數精確度DCT之變換 亦可。 又’與在本實施形態就第1變換所述者相同,第2變換 亦可為分離型構成。當第1變換與第2變換為分離型時,例 如’若將輸入設為二維訊號,則在已分離之各維中將成為 —維訊號處理,可適用以本實施形態丨〜8所述之二段階變換 處理。 第49圖係顯示本發明實施形態9的變形例之變換部ι10 運行之一例的流程圖。關於與第48A圖及第48B圖執行同運 109 201136319 行之步驟,賦予同符號而省略說明。 分割部210將第1變換輸出訊號分割成第1部分訊號與 第2部分訊號(步驟S114)。此時,分割部210不會將P維的第 1部分訊號更換排列成一維。 而且,第2變換部220係作為第2變換之第1座標軸變換 將行方向的變換處理予以執行,來生成第1座標軸變換訊號 (SI 16a)。接著,第2變換部220係作為第2變換的第2座標軸 變換,對第1座標軸變換訊號施以列方向的變換處理,來生 成第2座標軸變換訊號(S116b)。如此所生成的第2座標軸變 換訊號相當於第2變換輸出訊號。而,行與列之變換順序交 換亦可。 而,亦可將第1方向的變換處理與第2方向的變換處理 予以接續進行。第50圖係顯示本發明實施形態9的變形例之 變換部110運行之一例的流程圖。 與第49圖交換處理之順序,即:第1變換部200將行方 向的第1變換之第1座標軸變換予以執行後(SI 12a),分割部 210對行方向進行分割(SI 14a)。而且,第2變換部220將行方 向的第2變換之第1座標軸變換予以執行後(SI 16a),統合部 230施予行方向的統合處理(SI 18a)。 接著,第1變換部200將列方向的第1變換之第2座標轴 變換予以執行後(SI 12b),分割部210進行列方向的分割 (SI 14b)。而且,第2變換部220將列方向的第2變換之第2座 標軸變換予以執行後(S116b)、統合部230進行列方向的統合 處理(S118b)。 110 201136319 而,行與列之處理順序交換亦 <。又,當變換係數包 含零係數時,未將分割處理與統合處该予以顯現為明示性 步驟亦可。 如以上,藉由本發明實施形降9厶編碼裝置及編碼方 法’可抑制變換處理的運算量與變換#數的資料量,並適 應於輸入訊號的統計性質之變化。尤其,對P維(P為2以上 的整數)的輸入訊號很有效。 (實施形態10) 本發明實施形態1 〇之解竭裝置及解碼方法具備一種逆 變換部及逆變換方法,其係聲音資料、靜態影像資料、動 態影像資料等訊號以複數種變換的組合,將編碼過的編碼 訊號(在實施形態9中所生成的編碼訊號)予以逆變換者。本 發明實施形態10之解碼裝置及解碼方法,其特徵在於:以 第1逆變換及第2逆變換之至少一方,將分離型逆變換予以 執行。對於與上述實施形態的同構成,有時會附加同標號 而省略説明。 本發明實施形態10之解碼裝置及解碼方法中,解碼變 換輸出訊號、解碼變換輸入訊號、解碼訊號、預測訊號為P 維訊號(P為2以上的整數)。 第1逆變換部430係在運算處理之一部分或全部中,使 用固定變換處理。具體而言,例如,使用具MPEG-1/2M視 頻編碼規格的離散餘弦變換,或,H.264/AVC規格採用的整 數精確度DCT。或者,將上述實施形態2、4、6、8之逆變 換作為分離型變換之一部分來使用亦可。 111 201136319 分割部會輸入P維(例如,p=2)的解碼變換 號,並依照分割統合資訊,將 、出讯 解碼讀輸纽號與第2解碼部分訊 1第2 以第2逆變拖拓瞌,斟筮s 步逆文換口 Ml〇係 〜換矩陣,對第2解碼變換輸出訊號施以 換’來生成第1解碼部分訊號。 資訊,將第2解碼部分訊號 來生成第1解碼變換輪出 統合部420係依照分割統合 與第1解碼部分訊號予以統合, 訊號。 ▲第1逆變換部43 0係對第丨解碼變換輸出訊號施以八 型支換之第1逆變換’來生成解瑪變換輸入訊號。在第^ 變換部430中’執行將行方向的變換予以執行之第 換(即11座標軸逆變換),其次,執行將列方向的變換= 、執行之第2分離變換(即,第2座標轴逆變換)。亦可是將、 方向與列方向之處理予以交換之構成。 _ nxn的二維訊號之輸入,其維數為ηχη,由於變換的運 算里會變得龐大,因此宜採取分離型構成。在分離型中, 在订或列的一個變換單位中維數為η,由於與非分離型之變 換的維數ηχη相較為低,因此可減輕運算量。分割部卯〇、 第2逆變換部410、及統合部420之運行與上述實施形態2、 4 6、8相同,故而省略説明。 乂第51Α圖說明本發明實施形態1〇之逆變換部33〇執行 的逆變換方法。第51Α圖係顯示本發明實施形態10之逆變換 部33〇運彳t之—綱流程圖。 首先,分割部400取得分割統合資訊(步驟S231)。而且’ 112 201136319 破*(pa2以上的整數) 並且分成第2解碼變 32) 〇 分割部400依照分割統合資訊,將p維訊 之解碼變換輸出訊號更換排列成一維, 換輸出訊號與第2解瑪部分訊號(步驟幻
丹二X S233)。而且第㈤纟化 逆變換係數(步驟 —G係對第2解碼變 施以第2逆變換’來生成第1解碼部分訊號(步驟二 接著,統合部420依照分割統合資訊,將—唯霄 1解碼部分訊號更換排列成_訊號,並將更換排㈣ 號與第綱部分訊料d生❹⑽ 出 訊號(步驟S236)。 再來,第1逆變換部430取得第1逆變換係數(步驟 S237)°而且’第1逆變換部_對_碼變換輸出訊號 施以第1逆變換’來生成解碼變換輸入訊號(步驟如8)。在 此,步驟S238含有下列二個步驟。 即’具體而言’第1逆變換部43〇將第i解石馬變換輸出訊 號往第1座標軸方向予以逆變換,來生成第丨座站I拖 訊號(步.驟S238a)。其次,第味變換部將第i座標轴逆變 換訊號往第2座標軸方向予以逆變換,來生成第2座標軸逆 變換訊號(步驟S238b)。如此所生成的第2座標軸逆變換訊號 相當於上述實施形態2、4、6、8之解碼變換輪入訊號。 而,如第51B圖所示,分割統合資訊之取得(步驟“η) 及逆變換係數之取得(步驟S233及步驟S237),如前述有多 種通知的變動’因此不限於在本流的時序實施。 又,前述第1座標軸逆變換及第2座標軸逆變換(步驟 113 201136319 S238a、步驟S238b)係上述實施形態2、4、6、8所記載之第 1逆變換亦可。又,前述第1座標軸逆變換及第2座標軸逆變 換(步驟S238a、步驟S238b)例如係具MPEG — 1/2/4視頻編碼 規格的離散餘弦變換,或,H.264/AVC規格採用的整數精確 度DCT之變換亦可。 又’與在本實施形態就第1逆變換所述者相同,第2逆 變換亦可為分離型構成。當第1逆變換與第2逆變換為分離 型時’例如’若將輸入設為二維訊號,則在已分離之各維 中係成為一維訊號處理,可適用以本實施形態所述之二 段階變換處理。 第52圖係顯示本發明實施形態1 〇的變形例之逆變換部 330運行之一例的流程圖。關於與第51A圖及第51B圖執行 同運行之步驟,賦予同符號而省略說明。 分割部400將解碼變換輸出訊號分割成第丨部分訊號與 第2部分訊號(步驟S232)。此時,分割部4〇〇不會將p維的第 1部分訊號更換排列成一維。 第2逆變換部410係作為第2逆變換的第丨座標軸變換將 行方向的逆變換處理予以執行,來生成第丨座標軸逆變換訊 號(S234a)。接著’第2逆變換部41〇係作為第2逆變換的第2 座標軸變換將列方向的逆變換處理予以執行,來生成第2座 標軸逆變換訊號(S234b)。如此所生成的第2座標軸變換訊號 相當於第1解碼部分訊號。而,行與列之變換順序交換亦可。 而,將第1方向的逆變換處理與第2方向的逆變換處理 予以接續進行亦可。第53圖係顯示本發明實施形態1〇的變 114 201136319 形例之逆變換部330運行之一例的流程圖。 首先,分割部400實施行方向的分割(S232a),而第2逆 變換部410實施行方向的第2逆變換之第1座標軸變換 (S234a)。而且,統合部420實施行方向的統合處理(S236a), 而第1逆變換部430實施行方向的第1逆變換之第1座標軸變 換(S238a)。 接著,分割部400實施列方向的分割(S232b),而第2逆 變換部410實施列方向的第2逆變換之第2座標軸變換 (S234b)。而且,統合部420實施列方向的統合處理(S236b), 而第1逆變換部430實施列方向的第1逆變換之第2座標軸變 換(S238b)。 而,行與列之處理順序交換亦可。當逆變換係數包含 零係數時,未將分割處理與統合處理予以顯現為明示性步 驟亦可。 如以上,藉由本發明實施形態10之解碼裝置及解碼方 法,可抑制變換處理的運算量與逆變換係數的資料量,並 適應於輸入訊號的統計性質之變化。尤其,對P維(P為2以 上的整數)的輸入訊號很有效。 (實施形態11) 本發明實施形態11之編碼裝置及編碼方法具備一種變 換部及變換方法,其係將欲成為聲音資料、靜態影像資料、 動態影像資料等編碼對象的訊號,藉由複數種變換的組 合,進行變換者。本發明實施形態11之編碼裝置及編碼方 法,其特徵在於:對有適用第2變換之部分、及未有適用第 115 201136319 2變換之部分施以不同的處理。對於與上述實施形態的同構 成’有時會予以附加同標號而省略説明。
以第54A圖說明本發明實施形態11之編碼裝置。第54A 圖係顯不本發明實施形態11之編碼裝置1200構成之一例的 方塊圖。 如第54A圖所示,編碼裝置12〇〇與第17圖顯示之實施形 態3之編碼裝置5〇〇相較之下,在具備變換部121〇、量子化 部1220、熵編碼部123〇、逆量子化部124〇及逆變換部125〇, 來取代變換部510、量子化部120、熵編碼部13〇、逆量子化 部540及逆變換部55G之點上,彼此相異。在以下,省略説 明與實施形態3之編碼渡置5⑼的同構成,並以相異點為十 心加以説明。 本實施形態中,變換部m〇之輸出係依據第2變換之適 用的有無,來分離成二個而予以輸出。即,變換部ΐ2ι〇係 對變換輸入訊號施以第1變換及第2變換,來生成變換輸出 5孔號,並將所生成的變換輸出訊號當中,有適用第2變換之 部分、及未有適用第2變換之部分,分別作為二個訊號來予 以輸出。換言之,變換部1210係將前述第2變換輸出訊號作 為變換輸出訊號L來予以輸出,而將前述第2部分訊號作為 變換輸出訊號Η來予以輸出。 第2變換輸出訊號,其統計上性質與第2部分訊號彼此 相異,因此將後續處理亦個別地予以執行,而可達更好的 性能提升。具體而f,量子化部1220將變換輸出訊號匕與變 換輸出訊號Η予以掃描、量子化,來分別生成量子化係數l 116 201136319 與量子化係數Η。換言之,量子化部122〇係將構成變換輸出 訊號之係數値予以掃描,並將包含所掃描的係數値之掃描 讯號予以量子化,來生成量子化係數。 屆時’量子化部1220係控制成將來自量子化係數L量子 化之損失抑制得很低,而放寬分配到對主觀畫質影響巨大 的低域訊號之資料量亦可。即,量子化部1220於掃描訊號 當中,將對應於第2變換輸出訊號之第丨掃描訊號,以第^精 確度予以量子化,而將對應於第2部分訊號之第2掃描訊 唬,以較第1精確度為低的第2精確度予以量子化。而,在 畺子化部1220中,可切換量子化精確度。 又,量子化部1220將對含於變換輸出訊號[之係數値的 掃描運行,及,對含於變換輸出訊號11之係數値的掃描運行 予以切換亦可。而,在量子化部122〇中,可切換掃描方式。 例如,當第2變換為非分離型構成時,量子化部122〇以 更換排列成一維以後之列的第2變換輸出訊號之順序進行 掃描,而對於未適用第2變換之第2部分訊號,則在曲折掃 描等的水平方向與垂直方向幾乎同時移動,並在區塊之_ 端進行切回掃描。即,量子化部1220將構成第2變換輪出气 號之係數値以第2變換之功率順序予以掃描,且,將構成第 2部分訊號之係數値以曲折掃描予以掃描。 而,當變換的輸入輸出為多維訊號時,就第2部分訊號 進行多維曲折掃描亦可,或,逐次進行二維曲折掃描亦可。 例如,在輸入YUV訊號之範例中,將γ訊號的第2部分訊號 予以曲折掃描’將U訊號的第2部分訊號予以曲折掃描,並 117 201136319 將V訊號的第2部分訊號予以曲折掃描亦可。γυν處理I 序不在此限。 ’ 嫡編碼部123«係將量子化係數L^以舰碼,來生成編 碼訊號L,並將量子化係數Η予以熵編碼,來生成編瑪訊^ Η°而且’熵編喝部1230係將編碼訊號L與編碼訊號Η化 多工並輸出。 〜予以 又,量子化係數L與量子化係數Η,其統計上性質相 異,因此熵編碼部1230係將内部狀態變數(發生機率、上下 文等)予以獨立管理。巾,在嫡編碼部1230中,可切換熵* 碼方式。又,亦可切換二元化(binarjzati〇n)、上下 人等出方 法。由於熵編碼之内部狀態變數係用以記憶狀態而消耗二己 憶體,因此有時是期望能將之削減。因此,例如,亦可^ 一構成,即,將對於變換輸出訊號L的該等設置得後密實·"', 而將對於變換輪出訊號Η的該等設置得很稀疏。密實或^疋户 意指:顯示獨立内部狀態變數之個數對變換輸出訊號之個 數之比的大小關係者。 即,熵編竭部1230於量子化係數當中,對對應於第2變 換輪出訊號之第1量子化係數,及,對應於第2部分訊號之 第2量子化係數,分別以不同的機率表予以熵編碼。或熵 編碼部1230對量子化係數當中第i量子化係數及第2量子化 係數,分別進行不同的上下文導出,來將量子化係數予以 網編碼亦可。 逆量子化部1240係將量子化係數l予以逆量子化,來生 成解碼變換輸出訊號L,並將量子化係數5^予以逆量子化, 118 201136319 來生成解碼變換輪出訊號Η。逆量子化部12 4 0係進行與量 化部1220執行之處理相反的處理。 逆變換部1250係將解碼變換輸出訊號L及解碼變換輪 出虎Η予以逆變換,來生成解碼訊號。逆變換部〖ho係進 行與變換部121〇執行之處理相反的處理。 而,相對於對變換輸出訊號Η之處理(掃描、量子化、 熵、扁馬)’將對變換輸出訊號L之處理(掃描 '量子化 '熵編 碼)的處理順予以提早進行亦可。當以該處理優先順位進行 時,因應對變換輸出訊號L之該等處理結果 ,來切換對變換 輸出訊號Η之該等處理之運行亦可。例如,因應變換輸出訊 5虎L的非零係數之量’來切換對量子化係數η之熵編碼的内 部狀態變數亦可。 第54Β圖係顯示本發明實施形態11之編碼裝置1200之 每個吼號的處理差異之一例之圖。如第54Β圖所示,在本 發明實施形態11之編碼裝置12〇〇中,在掃描、量子化、熵 編碼之至少一個中,對分別對應於第2變換輸出訊號與第2 部分訊號之訊號,進行不同的處理。 本發明實施形態11之編碼處理流,與上述實施形態之 編碼處理流幾乎相同,因此在以下以第18圖加以説明。 首先’在將預測誤差訊號作為輸入訊號予以使用時’ 預測。卩580係生成預測誤差訊號(步驟S305)。其次,變換部 1210係將預測誤差訊號或輸入訊號予以變換,來生成有適 用第2變換之變換輸出訊號L、及未有適用第2變換之變換輸 出訊號Η(步驟sii〇)。 119 201136319 接著’量子化部1220係將變換輸出訊號L予以量子化, 來生成量子化係數L,並將變換輸出訊號η予以量子化,來 生成量子化係數Η(步驟812〇)。再來,熵編碼部1230係將量 子化係數L予以熵編碼,且,將量子化係數η予以熵編碼, 來生成編碼訊號(步驟Sl3〇”而,量子化係數L之熵編碼與 量子化係數Η之熵編碼係内部狀態變數相互獨立。 接下來,逆量子化部1240係將量子化係數[予以逆量子 化,來生成解碼變換輸出訊號L ,並將量子化係數11予以逆 里子化,來生成解碼變換輸出訊號Η(步驟S34〇)。還有,逆 變換部12 5 G係將解碼變換輸出訊號L與解碼變換輸出訊號 Η予以逆變換,來生成解碼訊號(步驟S35〇卜最後,將所生 成的解碼訊號儲存於記憶體57〇(步驟S36〇)。 而’在依,H施形態3所叙輪人訊韻局部統計性 質之變動來控制第2變換係數的構成中,依照該等變動來將 掃描、量子化、熵編碼之内部狀態變數予以切換亦可。但, 因切換種誠增加會有内部記憶體量增加之缺點,因此可 將對變換輸出訊號L之掃描、量子各 ^ α 里丁化、熵編碼之内部狀態變 數、及熵編碼之上下文導出方法予以切換,但不使對變換 輸出訊號Η之該等連動,即,俅用π , 足用问—個記憶體來控制記憶 體使用量亦可。又,掃描、量+各 ϋ、及熵編碼之内部狀態 變數與上下文導出方法’並非同昧胳、* 夺將連動與非連動予以切 換,而是個別地將連動與非連動予以切換亦可 而,掃描可為預先已規定之周a
义模式(pattern),或,亦 可為基於量子化係數的發生頻率而s A 午而更新之動態模式。掃描 120 201136319 對應 訊號 方式、量子化精確度、及熵編碼方式之切換頰率中, 於第2變換輸出訊號之訊號的—方,較對應於第八 之说號為高亦可。 如以上,藉由本發明實施形態丨丨之編碼裝置及編石 法,可抑制變換處理的運算量與變換係數的資料旦.,馬方 應於輪入訊號的統計性質之變化。 並適 (實施形態12) 本發明實施形態12之解碼裴置及解碼方法具備— 變換部及《換方法,其係聲音資料、靜態象種疋 能旦^貝料、動 心衫像資料等訊號,藉由複數種變換的組合, ΛΑ :、’扁叾馬過的 、,扁馬汛號(在實施形態11中所生成的編碼訊號 本丄 贶)于以圯變換 者。本發明實施形態12之解碼裝置及解碼方法其特徵在 於:對有適用第2變換之部分、與未有適用第2變換之邱*八在 進行不同的處理。對於與上述實施形態的同構成有= 予以附加同標號而省略説明。 " 以第55A圖説明本發明實施形態12之解碼裝置。第$ 圖係顯示本發明實施形態12之解碼裝置13〇〇構成之 方塊圖。 ^ 如第55A圖所示,解碼裝置1300與第27圖顯示之實施形 態4之解碼裝置700相較之下,在具備熵解碼部131〇、逆二 子化部1320及逆變換部1330,來取代熵解碼部31〇、逆旦= 化部320及逆變換部730之點上,彼此相異。在以 、 卜,省略 説明與實施形態4之解碼裝置700的同構成 中心加以説明。 並以相異點為 121 201136319 熵解碼。卩13i〇係將編碼訊號予以熵解碼,來生成解碼 量子化係數L與解碼量子化係數H。在熵解碼中,對於解碼 里子化係數L與解碼量子化係數内部狀態變數(機率狀 態變數、上下文)係相互獨立。 又,亦可將二元化、上下文導出方法予以切換。而, 在摘解碼部131()中,可切換熵解碼方式。熵解碼之内部狀 ,%變數係用以記憶狀態而消耗記憶體,因此有時期望能將
之削減。亦可為一種構成,即,將對於解碼量子化係數L 的该等設置得很密實,而將對於解碼量子化係數_該等設 置得很稀疏1實或稀疏意指:顯示獨立内部狀態變數之 個數對解碼量子化係數之個數之比的大小關係者。 即,熵解碼部1310於編碼訊號當中,對對應於第2解碼 變換輸出汛號之第丨編碼訊號,及,對應於第2解碼部分訊 號之第2編觀號’分別以不同的機率表予以熵解碼。或, 練碼部131_編柳號冑巾帛丨編職號及仏編碼訊 號’分別進行不同的上下文導出,來將編碼訊號予以熵解 碼亦可。 逆量子化部1320係將解碼量子化係數[予以逆量 化、逆掃描,來生成解碼變換輸出訊號再者,逆量子 部1320係將解碼量子化係數η予以逆量子化'逆掃描,來 成解碼變換輸出訊號Η。即,逆量子化部⑽係將解碼量 化係數予以逆量子化,來生成解,描訊號,並將構= 瑪掃描訊號之錄値予以掃描。藉此,來生成包含已掃 之係數値的解碼變換輸出訊號。 122 201136319 而逆$子化部1320於解碼量子化係數當中, 二第:解碼,換輸出訊號之第【解碼量子化係數,以第_ 里子化’而將對應於第2解碼部分訊號之第2解媽 里匕係數’以較第咏確度為低的第2精確度予以 化亦可 、,η 里子化部1220中,可切換量子化精確度。 逆變換部1330係將解碼變換輪出訊號L與解碼變^ 出訊號Η予以逆變換,來生成解碼變換輸人訊號。而,= 義輸出訊號L與解碼變換輸出訊號Η,係分別相當 解碼變換輪出訊號及第2解碼部分訊號。 、 而,在思量子化部1320中,亦可將對於解碼量子 數L之逆掃描、及對於解碼量子化係數Η之逆掃描的運行予 以切換在逆量子化部132时,可切換掃描方式。告 第換為非分離型構成時,以更換排列成—維後之列的 第1解碼部分訊號之順序進行逆掃描,而對於未適用第a逆 變換之第2解碼料訊號,則在曲折掃描等的水平方向與垂 直方向幾乎同時移動’並在區塊之_端進行切回逆掃描。 即’逆量子化部⑽於解碼掃描訊號當中,將構成對 應於第2解碼變換輸丨城之帛丨解鱗描訊叙係數値, 以第2逆變換之功率順序予以掃描,1,將構成對應於幻 解碼部分tfl號之第2解碼掃描訊號之係數値,以曲折掃 以掃描。 而,當變換的輸入輸出為多維訊號時,就第2解碼部分 訊號進行多維曲折掃财可,或者,逐切行二維曲折掃 描亦可。例如,在輸入YUV訊號之構成中,將丫訊號的第2 123 201136319 解碼部分sfl號予以逆曲折掃描,將·號的第2解碼部分訊 唬予以逆曲折掃描,並將V訊號的第2解碼部分訊號予以逆 曲折掃描亦可。Yuv處理之順序不在此限。 而’相對於對解碼量子化係數Η之處理,將對解碼量子 化係數L之處理的處理順予以提早進行亦可。當以該處理優 先順位進行時’因應對解碼量子化餘L之料處理結果, 來切換對解碼量子化係數Η之該等處理之運行亦可。 第55Β圖係顯示本發明實施形態12之解碼裝置13〇〇之 每個δί1唬的各處理差異之一例之圖。如第55Β圖所示,在 本發明貫施形態12之解碼裝置13〇〇中,在熵解碼、逆量子 化及掃描之至少一個中,對分別對應於第2解碼變換輸出訊 唬與第2解碼部分訊號之訊號,施以不同的處理。 本發明貫施形態12之解碼處理流,與上述實施形態之 解碼處理流幾乎相同,故而以第28圖加以説明。 首先,預測部770係以已儲存於記憶體76〇之編碼完畢 訊號為基準,來生成預測訊號(步驟S4〇5)。而,當以直接變 換輸入5fl 7虎的編碼方法,將所生成的編碼訊號予以解碼 時,可省略本步驟S405。 其次,熵解碼部1310係將編碼訊號予以熵解碼,來生 成解碼量子化係數L與解碼量子化係數η(步驟S21〇)。在 此,在熵解碼中,對於解碼量子化係數1與解碼量子化係數 Η之内部狀態變數(機率狀態變數、上下文)係相互獨立。
接著,逆量子化部1320係將解碼量子化係數[予以逆量 子化,來生成解碼變換輸出訊號L,並將解碼量子化係數H 124 201136319 予以逆量子化,來生成解瑪變換輸出訊號Η(步驟S220)。而 且,逆變換部⑽係將解碼變換輪出訊號L與解碼變換輸出 訊號Η予以逆變換’來生成解碼變換輪人訊號(步驟㈣)。 再來ϋ胃7 5 G係將w職測訊號與解碼變換輸入訊 5虎予、累加纟生成解碼机號。而且,將解碼訊號儲存於 記憶體760,使其可供至下_個時序來參考(步驟難)。 而,在依照以實施形態3所述之輸入訊號的局部統計性 質之變動來控制第2逆變換係數的構成中,依照該等變動來 將網解碼之上下文導出方法、熵解碼之内部狀態變數、逆 量子化、及逆掃描料城亦可。但,因切換種類的增加 會有内4 C·己It、體量增加之缺點,因此可將輸出解碼量子化 係數L的熵解碼之内部狀態變數、對解碼量子化係數l之逆 $子化、及對該等之逆掃描予以切換,但不使與解碼量子 化係數Η相關聯之該等處理連動,即’使用同一個記憶體來 控制記憶體使用量亦可。熵解碼之上下文導出方法、滴解 碼之内部狀錢數 '逆量子化、及逆掃描,並非同時將連 動與非連動予以切換,而是個別地將連動與非連動予以切 換亦可。 而’逆掃描可為預先已規定之固定模式,或者,亦可 為基於量子化係數的發生頻率而更新之動態模式。掃描方 式、逆量子化精確度、及熵解碼方式之切換頻率中,對應 於第2解碼變換輸出訊號之訊號的一方,較對應於第2解碼 部分訊號之訊號為高亦可。 如以上’藉由本發明實施形態12之解碼裝置及解碼方 125 201136319
t ’可抑制變換處理的運算量與逆變換龜的資料 ^應於輸人訊號的統計性質之變化。 (貫施形態13) 本發明實施形態13之編煎置、編碼方法、解喝裝遷 及解碼方法,其特徵在於:利用第2變換係數及第2逆變摘 糸數之特徵,以增南編碼效率的方式,將變換係數予以編 碼及解碼。第2變換矩陣及第2逆變換矩陣係如以下所干之 特徵性_,因此可達錢換性㈣提升、或變 資料量削減。 的 在本實施形態中設想—例,即,將由四個元素形 第1部分訊號yILm輸入至第2變換部22〇,而第2變換部咖以4 X4矩陣之第2變換矩陣A,,將第1部分訊號y,予以變換, 來輸出第1部分變換輸出訊號y2m。 如第56A圖所示,構成第2變換矩陣A,之第2變換 數,係以a(i,j)(或,aij)表示。而,i=l、2、3、4、及卜1 3、4。此時’如第56A圖所示,將為i=j之元素㈣係對角2元 素,而將為之元素係非對角元素。再者,非對角元= 分類為上三角it素,即,為…之元素者;及下 即,為i>j之元素者。 ’ ’ 在以下,首先説明第2變換矩陣之對角元素的特微。 假設,在第1變換為達成完全無相關化之變換的情況 下,第2變換無法再將第丨變換輸出訊號予以無相關化 此可將對角元素全部設定為i(即,在8位元精確度的係數: 為255)’而將非對角元素全部設定為〇。 126 201136319 但,如上述,第1變換係數導出部202係將已平均最佳 化至含於集合SA之複數變換輪入訊號/的第丨變換矩陣Α|Π 予以導出,因此並未最佳化至各個變換輸入訊號χη。因此, 第1變換部200無法達成完全無相關化,而第i變換輸出訊號 yr、及其一部分之第1部分訊號y|Lm並未完全無相關化。因 此,以第2變換係數導出部222導出之第2變換係數構成的第 2變換矩陣Α/之對角元素未必會成為1,而非對角元素未必 會成為0。 但’第1部分訊號y1Lm因第1變換有達某程度的無相關 化’因此將第2變換矩陣A2m之對角元素設定成近似於丨之 値’而將非對角元素設定成近似於〇之値亦可。因此,將第 2變換係數予以編碼時,對角元素a(i,i)與1之差分會成近似 於〇之俊’因此可削減應編碼之資訊量,故而較可提高編碼 效率。 又’對角元素,其高域成分愈高,愈容易受特殊相關 之影響,因此設定成從1偏離之值亦可。即,愈是右下之對 角元素,將其設定成從1偏離之值亦可。例如,亦可自左上 至右下之間,決定第2變換矩陣之對角元素,來使値呈—次 函數或等差級數來變小。關於逆矩陣亦相同。 第56B圖係顯示第2變換矩陣及第2逆變換矩陣之—例 之圖。如第56B圖所示,對角元素値之大小亦可設定成非對 角元素値大小的四倍以上。在各式各樣的雜訊等外訊思人 的情況等,對角元素値的大小係設定成非對角元素値大小 的二倍以上亦可。換言之,第2變換部220在經矩陣表現的 127 201136319 情況下,所有的對角元素値係將非對角元素値之二倍以上 之値的變換係數,作為第2變換係數來使用而進行第2變換 亦可。同様地,第2逆變換部410在經矩陣表現的情況下, 所有的對角元素値係將非對角元素値之二倍以上之値的逆 變換係數,作為第2逆變換係數來使用而進行第2逆變換 亦可。 接著,關於非對角元素之係數,變換係數係以a(i,j)表 示時,以a(j,i)表示之顛倒元素係幾乎將絕對值設定成同等 值亦可。第56B圖係非對角元素之變換係數使持有與顛倒元 素大致同等的絕對值之例。ai2=48與a21=-58之對、ai3=64與 a31=-57之對等為典型例。而,幾乎同等係意指以絕對值2 成以内之誤差。 第56C圖係顯示預定元素與顛倒元素之絕對值的平均 値之圖。如第56B圖及第56C圖所示,在使各元素及對應之 平均値大致呈同一的條件下,來決定變換係數。 而,第56D圖係顯示第56B圖顯示之非對角元素、及第 56C圖顯示之絕對平均値之差分之圖。本實施形態中,可在 使第56D圖顯示之差分變小的條件下,來決定第2變換係 數値。 又,第2變換係數作為特徵性關係有一種對象元素之符 號(a(i,j))與顛倒元素aG,i)之符號多為彼此相異的關係。例 如,如第56B圖所示,a12=48與a2i=-58之對、a丨3=64與a3丨=-57 之對等為典型例。 又,在以滿足第56E圖所示之關係的情況下,來決定變 128 201136319 換係數亦可。而’第56E圖係顯示上三角元素與下三 之間的符號關係之圖。具體而言,即, ’、 ^ A T ^ —也 上二角兀素之符號 夕為正,而下二角元素之符號多為負 而,於變換係數設定零,雖可實現乘法處理次數的削 減、及保持變換係數之記㈣量的削減,但以持有在本银 施形態所述之龍的變換係數為基準,將絕對值小之^ 係數設定成零亦可。換言之,第—_係將經矩陣表 現後的至少—個非對角^素値為G之變換係數,作為第2變 換係數來使用而進行第2變換亦可。同様地,第2逆變換部 410係將祕陣表現後的至少—個非對肖元素之逆變 換係數,作為第2逆變換係數來使用而進行第2逆變換亦可。 例如,在第56B圖中,將a|4=10、a24=1〇、a34=2、a4|= 3、 ¥-25、知=_28設定成零亦可。第56F圖顯示將非對角元素 之至少一個設定成〇之第2變換係數之例。 、如以上,依據本發明實施形態3之編碼裝置、編碼方 去解碼裝置及解碼方法,係以在具有特徵性質的條件下 來決定變換係數’ S此可彻職徵性質來將變換係數予 以編碼或解碼,而提高編碼效率。 (實施形態14) 本發明實施形態14之編碼裝置及編碼方法具備一種變 換部及變換方法,其係將欲成為聲音資料、靜態影像資料、 動〜、〜像 > 料等編碼對象的訊號,藉由複數種變換的組 合’施以變換者。本發明實卿態14之編碼裝置及編碼方 法,其特徵在於:將第2變換處理與量子化處理並列進行。 129 201136319 對於與上述實施形態的同構成,有時會予以附加同標號而 省略説明。 在本發明實施形態14中,變換部11〇與量子化部12〇, 將一部分之處理予以並行處理,來縮短處理時間。第57八 圖係顯示本發明實施形態14之變換及量子化的計時圖之一 例之圖。 在第57A圖顯示之範例中,變換輸入訊號之維數〇為8 , 而往第2變換之輸入(第1部分訊號)之維數111為3。第丨變換處 理T,之後,執行第2變換處理1401 (丁2( 1)〜丁2(3))。在該例中, 含於第1部分訊號之元素數係3元素,因此設為花費3單位時 間》而,1單位時間係例如:一個元素之第2變換處理之 時間。 而且,如第57A圖所示,係延遲!單位時間並行,且對 第2變換輸出訊號施以量子化處理〜^(3))。爾 後’對第2部分訊號施以量子化處理14〇3(Qi⑴〜Q|(5))。 如以上,在本發明實施形態14之編碼裝置及編碼方法 中,將第1部分訊號之第k+i(k為自然數)項元素的第2變 換、及第2變換輸出訊號之第k項元素的量子化予以並列執 行。例如,如第57A圖所示,第丨部分訊號之第二項元素的 第2變換(丁2(2))及第2變換輸出訊號之第一項的量子化 (Q2(l)) ’係並列成同時間來予以執行。藉此,可縮短變換 部之處理時間。 而,在第57A圖顯示之範例中,將第2變換處理_與 對此之量子化處理丨402,可僅以丨單位時間之延遲來並列 130 201136319 化,且來自第2變換之導入的延遲會很小。對於第2變換之1 元素的處理需要m次積和運算,且運算量很多。因此,可將 該第2變換處理之處理時間予以延伸,並減緩運算電路的並 列程度,來抑制電路規模。 具體而言,如第57B圖所示,將第2變換處理1401與對 此之量子化處理1402,以1單位時間之延遲來使其呈並列。 但,由於第2變換處理1401之處理時間已經延伸,因此對此 之量子化處理1402會產生空檔時間。利用該空檔時間,來 將對第2部分訊號之量子化處理1403予以並行處理。 例如,如第57B圖所示,於對第1部分訊號之第一項元 素的第2變換處理(T2(l))中,進行對第2部分訊號之第一項 元素與第二項元素之量子化處理((Q2(l)、Q2(2))。藉此,可 抑制電路規模,並實現處理時間之短縮。 如以上,依本發明實施形態14之編碼裝置及編碼方 法,可抑制變換處理的運算量與變換係數的資料量,並適 應於輸入訊號的統計性質之變化。尤其,可減輕處理時間 之增加量。 (實施形態15) 本發明實施形態15之解碼裝置及解碼方法具備一種逆 變換部及逆變換方法,其係聲音資料、靜態影像資料、動 態影像資料等訊號,藉由複數種變換的組合,將編碼過的 編碼訊號(在實施形態14中所生成的編碼訊號)予以逆變換 者。本發明實施形態15之解碼裝置及解碼方法,其特徵在 於:將第2逆變換處理與逆量子化處理予以並列處理。對於 131 201136319 與上述實施形態具同樣構成,有時會予以附加同標號而省 略説明。 在本發明實施形態15中,逆量子化部320與逆變換部 330係將一部分處理予以並行處理,來縮短處理時間。第58A 圖係顯示本發明實施形態14之變換及量子化的計時圖之一 例之圖。 在第58A圖顯示之範例中,解碼量子化係數之維數η為 8,而往第2逆變換之輸入(第2解碼變換輸出訊號)之維數m 為3。第2解碼量子化係數之逆量子化處理1501(Q2(1)〜Q2(3)) 後,進行第2變換輸出訊號之第2逆變換處理 1502(T2(1)〜T2(3)),及,第2解碼部分訊號之逆量子化處理 1503((Κ1)〜(Μ5))。 如以上,在本發明實施形態15之解碼裝置及解碼方法 中,將第2解碼變換輸出訊號之第k(k為自然數)項元素的第2 逆變換、及第2解碼量子化係數之第k項元素的逆量子化予 以並列處理。例如,如第58A圖所示,第2解碼變換輸出訊 號之第一項元素的第2逆變換(T2(l))、與第2解碼量子化係 數之第一項的逆量子化(Q,(l)),係並列成同時間來予以執 行。如此一來,由於係將第2逆變換處理1502與逆量子化處 理1503予以並行執行,因此可將逆量子化及逆變換之全體 的處理時間抑制得很短。 而,並列之構成不限於上述範例。例如,將第2解碼變 換輸出訊號之第k(k為自然數)項元素的第2逆變換、及第1 解碼量子化係數之第k+Ι項元素的逆量子化予以並列處理 132 201136319 亦可。 間:=變換處理的並列程度,來延 理⑽予以並行執行。具體=換f㈣2與逆量子化處 之空檔時間,將對第2解 ,、㈣2讀換處理15〇2 予以並行處理。碼!子化係數之逆量子化處理咖 第-項元素的第“::2解碼變換輸出訊號之 化係數之第執爾2解碼量子 ^ -、弟—項几素的量子仆步神 :。藉此,可抑制電路規模,並實現處理時間之: 如以上,依本發明實施形態15之解碼裝置·。 ^可抑制變域理的運算量與逆變換係 ^方 間之增加量。 處之文化尤其,可減輕處理時 (實施形態16) 由於將用以實現在上述各實施形態所示之動能 碼方法或動態影像解碼方法之構成的程式記錄;::扁 體^而可在將U述各實施形態所示之處理予以獨= 電腦系統中輕易地實施。記憶媒體係磁碟、光碟、、 1C卡、半導體記憶料,可記錄程式者即可。、碟、 再者,在此說明在上述各實施形態所示之動態影 碼方法、或動態影像解碼方法的應用例及使用其之系名 第59圖係顯示實現内纟遞送服務之内容供給^ exlOO的全體構成之圖。將通訊服務的提供區分割成戶=先 T别望 133 201136319 之大小,並設置有於各室内分別固定無線局之基地台 exl07〜exl10 。 該内容供給系統exlOO係於網際網路exlOl透過網際網 路服務提供者exl02及電話網exl04、及基地台 exl07〜exllO,來連接電腦 exlll、PDA(Personal Digital Assistant)exll2、照相機exll3、手機exll4、遊戲機exll5 等各機器。 但,内容供給系統exl〇〇並不限於如第59圖之構成,亦 可為將任一元素予以組合連接。又,未透過固定無線台之 基地台exl07〜exllO,而使各機器直接連接至電話網exi〇4 亦可。又,各機器係透過近距離無線等而直接相互連接 亦可。 照相機e X113係可進行數位視頻照相機等動態影像撮 影之機器,而照相機exll6係可進行數位照相機等靜態影像 撮影、動態影像撮影之機器。又,手機exll4係GSM(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W—CDMA(Wideband — Code Division Multiple Access)方式 '或者LTE(Long Term Evolution)方式、HSPA(High Speed Packet Access)之手機 體、或PHS(PersonalHandyphoneSystem)等任一者皆可。 在内容供給系統exlOO中,照相機exll3等通過基地台 exl09、電話網exl04 ’連接至串流伺服器exi〇3,而成為可 現場(live)輸送等。在現場輸送中,對使用者以照相機exin 撮影之内容(例如,音楽現場之影像等),如在上述各實施形 134 201136319 態所説明施以編碼處理,並傳輸至争流伺服器exl03。另一 方面,串流伺服器exl03會對有需求的客戶(client)將所傳輪 之内容資料予以串流輸送。作為客戶,有可將上述編碼處 理後的資料予以解碼之電腦exl 11、PDAexl 12、照相機 exll3、手機exll4、遊戲機exll5等。在接收了所輸送之資 料的各機器中,將所接收之資料予以解碼處理並再生。 而,所攝影之資料的編碼處理可用照相機exll3處理, 亦可用進行資料傳輸處理的串流伺服器exl03處理,亦可是 兩者彼此分擔進行處理。同様地所輸送之資料的解碼處理 可用客戶處理,亦可用串流伺服器exl 03處理,亦可是兩者 彼此分擔進行處理。又,不限於照相機exll3,將以照相機 exll6所撮影之靜態影像及/或動態影像資料,透過電腦 exlll而傳輸至串流伺服器exl03亦可。此時的編碼處理可 用照相機ex 116、電腦ex 111、串流伺服器ex 103之任一者處 理,亦可是彼此分擔進行處理。 又,該等編碼、解碼處理一般是在具有電腦exlll或各 機器之LSIex500中處理。LSIex500可為單晶片,亦可為由 複數晶片形成之構成。而,將動態影像編碼、解碼用之軟 體以電腦ex 111等安裝入任何可讀取之記錄媒體(CD — ROM、軟性磁碟、硬碟等)中,而用其軟體來進行編碼、解 碼處理亦可。再者,在手機exll4為具照相機之情況下,將 以其照相機所取得之動態影像資料予以傳輸亦可。此時的 動態影像資料係以具有手機6乂114之1^16\500編碼處理過 之資料。 135 201136319 又’串流伺服器exl〇3係複數伺服器或複數電腦,亦可 是將資料予以分散處理或記錄,來予以輸送者。 如上述’在内容供給系統exlOO中,客戶可將編碼過的 身料予以接收、再生。如此一來,在内容供給系統exl〇〇中, 客戶可將使用者所傳輸之資訊以即時(real-time)接收、解碼 並再生’而不具有特別權利或設備之使用者亦可實現個人 播放。 使構成該内容供給系統之各機器的編碼、解碼,變得 可用在上述各實施形態所示之影像編碼方法或影像解碼方 法即可。 作為其例,就手機exll4加以説明。 第6 〇圖係顯示用了在上述實施形態所説明之影像編碼 方法與影像解碼方法的手機exl14之圖。手機exii4具有下 列各部,即:天線ex6(H,係用以在基地台以11〇之間傳送 接收電波者;照相機部以6〇3 ’係可拍攝CCD照相機等影 像' 靜態影像者;液晶顯示器等顯示部ex6〇2,係將解碼有 以照相機部ex603所撮影之影像、及以天線以6〇1所接收之 影像等的資料予以表示者;本體部,係由操作鍵ex6〇4群構 成者;喇〇八等聲音輸出部ex6〇8,係用以聲音輸出者;麥克 風等聲音輸入部ex605,係用以聲音輸入者;記錄媒體 ex6〇7,係用以保存已撮影之動態影像或者靜態影像資料、 已接收之郵件資料、動態影像資料或者靜態影像資料等、 及已編碼資料或已解碼資料者;以及槽(slot)部ex606,係可 用以將記錄媒體以607安裝於手機exll4者。記錄媒體ex6〇7 136 201136319 係儲存有快閃§己憶體元件者’ s亥快閃記憶體元件係一種於 SD卡等塑膠盒内電子抹除式可複寫唯讀記憶體 EEPROM(Electrically Erasable and Programmable Read Only Memory) o 再者,以第61圖說明手機ex 114。手機ex 114係對可將 具備有顯示部ex602及操作鍵ex604的本體部之各部予以統 括性控制的主控制部ex711,透過同步匯流排(Synchron〇us bus)ex713,將電源電路部ex7l〇、操作輸入控制部以7〇4、 影像編碼部ex*712、照相機介面部ex7〇3、LCD(Liquid Cry_
Display)控制部ex7〇2、影像解碼部ex7〇9、解多工部εχ7〇8、 記錄再生部ex707、調變解調電路部以7〇6、及聲音處理部 ex705彼此相互連接。 電源電路部ex710一但因使用者之操作而成為結束對 話及電源鍵至開啟狀態’則因自電池組對各部供電,而啟 動呈可將附照相機數位手機exl 14予以運行之狀態。 手機exll4係基於以CPU、R〇M及RAM等形成之主控制 部ex711的控制,藉由聲音處理部以7〇5,將於聲音通話模 式時以聲音輪入部ex6〇5所集音之聲音訊號,變換成數位聲 音貝料,並以調變解調電路部ex7〇6將此予以光譜擴散處 理’並且’於以傳送接收電路部ex701進行數位類比變換處 理及頻率變換處理後,透過天線ex6G1?以傳輸。又,手機 eX 114係將於聲音通話模式時以天線ex601所接收之接收資 料予以擴大’來進行頻率變換處理及類比數位變換處理, 且以調變解調電路部e X 7 G 6予以光譜逆擴散處理而藉由聲 137 201136319 音處理部ex705變換成類比聲音資料後,透過聲音輸出部 ex608將此予以輸出。 再者,在資料通訊模式時傳輸電子鄭件的情況下,藉 由本體部之操作鍵ex604的操作所輸入之電子郵件的文字 資料,係透過操作輸入控制部ex704而送出至主控制部 ex711。主控制部ex711係以調變解調電路部ex7〇6將文字資 料予以光譜擴散處理’且在以傳送接收電路部ex7〇l施加數 位類比變換處理及頻率變換處理後,透過天線ex6〇l往基地 台exl 10傳輸。 在資料通訊模式時傳輸影像資料的情況,係將以照相 機部ex603所攝影之影像資料,透過照相機介面部ex7〇3供 給至影像編碼部ex712。又,在未傳輸影像資料的情況下, 亦可將以照相機部ex603所攝影之影像資料,透過照相機介 面部ex703及LCD控制部ex702而直接顯示於顯示部ex6〇2。 影像編碼部e X 712係具備有在本申請發明所説明之影 像編碼裝置的構成,並藉由將由照相機部以6〇3所供給之影 像資料’以在上述實施形態所示之影像編碼裝置所採用之 編碼方法’予以義編碼,來變換成編碼影像資料,並將 此送出至解多X部eX7〇8。又’在此同時,手機exm係以 照相機部_3於攝影中,將以聲音輸人部柳5所集音之 聲音作為數位聲音資料,透過聲音處理部ex7Q5往解多:部 ex708送出。 解多工部ex·係將《彡像編,咖2所供給之編碼 影像資料、及從聲音處理部ex7G5所供給之聲音f料以預 138 201136319 定方式予以多工’並將從其結果所得之多工資料,以調變 解調電路部ex706予以光譜擴散處理,再以傳送接收電路部 ex701施加數位類比變換處理及頻率變換處理後,透過天線 ex601予以傳輸。 在於資料通訊模式時接收已連線至首頁等之動態影像 檔案的資料時,透過天線ex6〇l ’將從基地台exii〇所接收 之接收資料’以調變解調電路部ex706予以光譜逆擴散處 理’並將從其結果所得之多工資料往解多工部ex7〇8送出。 又,為了將透過天線ex601所接收之多工資料予以解 瑪,解多工部ex7〇8係藉由將多工資料予以解多工,來分割 成影像資料之位元流與聲音資料之位元流,並透過同步匯 流排ex713將該編碼影像資料供給至影像解碼部以7〇9,且 將該聲音資料供給至聲音處理部ex7〇5。 其次,影像解碼部ex709係具備有在本申請發明所説明 之影像解碼裝置的構成,藉由將影像資料之位元流,以在 上述實施形態所示之編碼方法所對應之解碼方法予以解 碼’來生成再生動悲影像資料,並透過LCD控制部ex7〇2將 此資料供給至顯示部ex602,藉此,例如可顯示已連線至首 頁之動態影像標案所包含的動態影像資料。在此同時,聲 音處理部ex705將聲音資料變換成類比聲音資料後,係將此 資料供給至聲音輸出部ex608 ’藉此,例如可再生已連線至 首頁之動態影像檔案所包含的聲音資料。 而,不限於上述系統之範例’最近,衛星、地波(gr〇und wave)之數位播放儼然已成話題’如第62圖所示,亦可將上 139 201136319 述實施形態之至少影像編碼I置或影像解碼裝置之任一 者’安裝人數_制线。域而言,在_如蕭中, 夕有耳曰資料、視頻資料或該等資料之位元流係透過電 波而傳送至通訊或播放衛星ex2G2。接受此之播放衛星 W02係發放播放用電波,而該電波係以具有衛星播放接收 設備的家庭綠X綱料純,並藉由f她收機^綱 或轉頻器(STB)ex217等裝置將位元流予以解碼後將此予 以再生。又’亦可將以上述實施形態所示之影像解碼裝置, 組裝於讀取機/記錄器ex2_,該讀取機/記錄器㈤職將 多工有已記錄於記錄媒體之CD或DVD等蓄積媒體ex215、 216的影像資料及聲音f料的位元流予以讀取解碼者。此 時,所再生的視頻訊號係顯示於顯示器以219。又亦有可 能為將影像解碼裝置組裝至轉頻器ex217|^,而以電視顯示 器ex219將此予以再生之構成,前述轉頻器以217係已連接 至電纜電視用之電纜ex2〇3或衛星/地波播放之天線以2〇4 者。此時,將影像解碼裝置安裝入電視—而非轉頻器—内 亦可。又,亦有可能為以具有天線ex2〇5之車ex21 〇 ,從衛 星ex202或從基地台等接收訊號,再將動態影像再生至具有 車ex210之汽車導航系統以211等顯示裝置。 又,亦可將在上述各實施形態所示之動態影像解碼裝 置或動態影像編碼裝置安裝入讀取機/記錄器以218内,該讀 取機/記錄器ex218係將多工有已記錄於DVD、BD等記錄媒 體e X 215之聲音資料、視頻資料、或該等資料之編碼位元流 予以讀取、解碼者,或者,係將聲音資料、視頻資料或該 140 201136319 等貝料予以編碼至記錄媒體ex215而記錄為多工資料者。此 時,所再生的視頻訊號係顯示於顯示器以219,可藉由圮錄 有編碼位元流之記錄媒體ex215,在其他裝置或系統中將視 ,號予以再生。又,將動態影像解碼裝置裝入轉頻器 ex217内,並以電視顯示器以219將此顯示亦可前述轉頻 器灿7係已連接至_電視用電或衛星/地波播放 之天線ex204者。此時,將動態影像解碼裝置安裝入電視— 而非轉頻器一内亦可。 第63圖係顯示電視(接收機)ex300之圖,前述電視(接收 機)e X 3 0 〇係已使用以上述各實施形態所説明之動態影像解 碼方法及動態影像編碼方法者。電視ex3〇〇具備:調諧器 ex301 ’係透過接收上述播放之天線ex2〇4或電纜ex2〇3等, 來取得、或輸出視頻資訊之位元流者;調變(modulate)/解調 (demodulate)部ex3〇2,係將所接收之編瑪資料予以解調、 或調變成傳輸至外部之編碼資料者;以及多工/解多工部 ex303,係將已解調之視頻資料、聲音資科予以解多工,或 將編碼過的視頻資料、聲音資料予以多工者。又,電視ex300 具有:聲音訊號處理部ex3〇4,係將聲音資料、視頻資料分 別予以解碼、或將各個資訊予以編碼者;訊號處理部 ex300,係具有視頻訊號處理部以3〇5者;喇叭ex307,係將 已解碼之聲音訊號予以輸出者;以及輸出部狀3〇9,係具有 將已解碼之視頻訊號予以顯示之顯示器等顯示部ex308 者。再者,電視ex300具有介面部ex3l7,其係具有接收使 用者操作輸入之操作輸入部ex312等者。而且,電視ex300 141 201136319 具有:控制部ex3H),係統括控制各部者;及電源電路部 ex3U,係供電至各部者。介面部灿7除操作輸入部仙2 以外’亦可具有下列襄置等’即:橋接器ex313,係與讀取 機/記錄器ex218等外部機器連接者;槽部ex314,係用Z可 安裝SD卡等記錄媒體ex216者;驅動器ex315,係用以與硬 碟等外部記錄媒體連接者;以及數據機ex316,係與電話網 連接者。而,記錄媒體ex216係可藉由儲存之非依電性/依電 性之半導體記憶體元件,將資訊予以電子記錄者。電視 ex300之各部係透過同步匯流排來彼此連接。 首先說明:電視ex300將藉由天線ex204等從外部所取 得之資料予以解碼、再生之構成。電視ex300係受來自遠程 控制器ex220等之使用者操作,而基於具有CPU等之控制部 ex310的控制,以多工/解多工部ex303,將以調變/解調部 ex302所解調之視頻資料、聲音資料予以解多工《再來,電 視ex300以聲音訊號處理部ex304,將已解多工之聲音資料 予以解碼,並以視頻訊號處理部ex305,以在上述各實施形 態所説明之解碼方法,將已解多工之視頻資料予以解碼。 已解碼之聲音訊號、視頻訊號係分別從輸出部ex309向外部 予以輸出。輸出之際’宜將該等訊號暫時蓄積於緩衝器 ex318、ex319等,以使聲音訊號與視頻訊號可同步再生。 又,電視ex300亦可係從磁氣/光碟、SD卡專記錄媒體 ex215、ex216 —而非從播放等—將編碼過的編碼位元流予 以讀出。其次説明:電視ex3〇〇將聲音訊號或視頻訊號予以 編碼,並傳輸至外部、或寫入記錄媒體等之構成。電視ex300 142 201136319 係受來自遠程控制器ex220等之使用者操作,並基於控制部 ex31〇之控制,以聲音訊號處理部ex3〇4將聲音訊號予以編 碼’再以視頻訊號處理部ex305 ’以在上述各實施形態所説 明之編碼方法,將視頻訊號予以編碼。已編碼之聲音訊號、 視頻訊號係以多工/解多工部ex303予以多工,而輸出至外 部。多工之際’宜將該等訊號暫時蓄積至緩衝器ex32〇、 ex321等’以使聲音訊號與視頻訊號同步。而,緩衝器 ex318〜ex321可如圖示具備有複數個,亦可為共有一個以上 緩衝器之構成。再者,如已圖示以外,例如亦可令在調變/ 解調部ex302或多工/解多工部ex303之間等,將資料蓄積於 緩衝器作為避免系統溢位、欠位之緩衝材。 又,電視ex300除了從播放等或記錄媒體等取得聲音資 料、視頻資料以外,亦可具備接收麥克風或照相機之^輸 入之構成,並對從該等所取得之資料施以編碼處理。而, 在此,雖已說明電視ex300為可達成上述編碼處理、多工、 及外部輸出之構成,但電視ex300無法進行該等處理,而是 僅可達成上述接收、解碼處理、外部輸出之構成亦可。 又,在以讀取機/記錄器ex218,自記錄媒體將編碼位元 流進行讀出、或寫入時,上述解碼處理或編碼處理可由電 視ex300、或讀取機/記錄器以218之任一者進行亦可由電 視ex300與讀取機/記錄器ex2ig相互彼此分擔進行。 舉例而言,於第64圖顯示來自光碟進行資料之讀入或 寫入時的資訊再生/記錄部ex4〇〇之構成。資訊再生/記錄部 ex400具備將於以下説明之元素ex4〇丨〜以4〇7。光學頭以仙^ 143 201136319 係將雷射點照射至光碟之記錄雜ex215:^記錄面來寫入 貢訊,並檢測出來自記錄媒體以215之記錄面的反射光來讀 入資訊。調變記錄部ex402係將已内藏於光學頭ex4〇i之半 導體雷射予以電縣,並依照記錄資料來進行雷射光之調 變。再生解调部ex4〇3係藉由已内藏於光學頭以4〇1之光檢 器’將來自記錄面的反射舒以電氣檢測出之再生訊號予 以增幅,並將已記錄於記錄媒體ex215之訊號成分予以解多 工解。周來再生所需之資訊。緩衝器ex404會暫時保存用 以記錄於記錄媒體ex215之資訊、及來自記錄媒體以215所 再生之資訊。磁碟馬達ex4〇5可使記錄媒體ex215旋轉。伺 服控制部ex406係控制磁碟馬達以4〇5之旋轉驅動,並使光 子頭ex401移動至預定資訊磁軌,來進行雷射點之追蹤處 理。系統控制部ex4〇7係控制資訊再生/記錄部ex4〇〇全體。 上述讀出或寫入之處理係由下列方法實現,即’系統控制 部ex407利用已保存於緩衝器ex4〇4之各種資訊,又視必要 生成、追加新資汛,並使調變記錄部ex4〇2、再生解調部 ex403、及伺服控制部以4〇6協調運行,而透過光學頭以4〇1 來進行貧訊的記錄再生。系統控制部ex4Q7例如係以微處理 器構成,並將讀出寫人之程舒以執行,來執行該等處理。 在以上,雖說明了光學頭以401為照射雷射點者,但亦 可為以近場光(near_fidd light)進行較高密實度記錄之構 成。 第6 5圖係顯示光碟之記錄媒體e X 215的示意圖。記錄媒 體ex215之記錄面形成有座圈(race)(槽)呈螺旋狀,而資訊磁 144 201136319 軌ex230記錄有事先藉由槽形狀之變化來顯示磁碟上之絕 對位置的地址資訊。該地址資訊包含用以特定記錄資料之 單位的記錄塊ex231位置之資訊,可在進行記錄或再生之裝 置中再生資訊磁軌ex230,並讀取地址資訊,來特定記錄 塊。又’記錄媒體ex215含有:資料記錄區域ex233、内圍 區域ex232、及外圍區域ex234。用以記錄使用者資料之區 域為資料記錄區域ex233,而配置成較資料記錄區域ex233 内圍或外圍之内圍區域以232與外圍區域ex234,係用於記 錄使用者資料以外的特定用途。資訊再生/記錄部ex4〇〇係對 此種記錄媒體ex215的資料記錄區域ex233施以編碼資料之 讀寫,而該編碼資料係已將編碼過的聲音資料、視頻資料 或該等資料予以多工者。 在以上’雖已舉例說明了一層DVD、BD等之光碟,但 非限定於該等者,亦可為多層構造且於表面以外亦可記錄 之光碟。又,亦可為進行多維記錄/再生一即,於磁碟之同 處,以各式各樣的不同波長之色光記錄資訊、或從各式各 樣的角度’記錄不同資訊層等一之構造之光碟。 又,在數位播放用系統ex200中,可在具有天線ex2〇5 之車ex210從衛星ex2〇2等接收資料,並將動態影像予以再 生至具有車ex210的汽車導航系統以211等顯示裝置。而’ 汽車導航系統ex211之構成,可例如為:於第63圖顯示之構 成當中,增加有GPS接收部之構成,或亦可為以電腦exlu 或手機exll4等進行同様處理。又,上述手機exU4等之終 端與電視ex300—様,除了具有雙方編碼器、解碼器之傳送 145 201136319 接收型終端以外,尚有僅有編碼器之傳輸終端、僅有解碼 器之接收終端之三種組裝形式。 如此一來,可將在上述各實施形態所示之動態影像編 碼方法或動態影像解碼方法,適用至上述任一機器、系統, 藉此’可獲得在上述各實施形態所説明之效果。 又’本發明並非是限於有關上述實施形態者’可在未 脫離本發明之範圍内,進行各種變形或修正。 (實施形態17) 在上述各實施形態所示之動態影像編碼方法及裝置、 動態影像解碼方法及裝置,典型上可由積體電路之LSI予以 實現。舉例而言,第66圖顯示已一晶片化之LSIex500之構 成。LSIex500具備將於以下説明之元素ex5〇l〜ex509,且各 元素係透過匯流排ex51〇而連接。電源電路部ex505係在電 源呈開狀態時對各部供電,來啟動可運行之狀態。 例如在進行編碼處理時,LSIex500係基於具有 CPUex502、記憶體控制器ex503、及串流控制器ex5〇4等之 控制部ex501的控制,藉由AVI/Oex509從麥克風exii7或照 相機exll3等輸入AV訊號。所輸入之AV訊號暫時蓄積於 SDRAM等外部記憶體ex511。並基於控制部以501之控制, 依照處理量或處理速度,將已蓄積之資料適宜地分割成複 數次等以後’傳送至机5虎處理部ex5 07,並在訊號處理部 ex507中進行聲音訊號之編碼及/或視頻訊號之編碼。在此, 視頻訊號之編碼處理係在上述各實施形態所説明之編碼處 理。接著,在訊號處理部ex507中,依狀況進行將編碼過的 146 201136319 聲曰資料與編碼過的視頻資料予以多工等之處理,並從串 抓I/Oex506輸出至外部。該已輸出之位元流係往向基地台 exl07傳輸、或往記錄媒體^215寫入。而,宜將資料暫時 蓄積於緩衝器ex5〇8,使可於多工之際同步。 又’例如在進行解碼處理時,LSIex500係基於控制部 ex501的控制,將藉由串流I/Oex506透過基地台exl07、或從 s己錄媒體ex2l5所讀出而獲得之編碼資料,予以暫時蓄積於 s己憶體ex511等。基於控制部ex5〇1的控制,依照處理量或 處理速度’將已蓄積之資料適宜地分割成複數次等以後, 傳送至號處理部ex5〇7,並在訊號處理部以5〇7中進行聲 音資料之解碼及/或視頻資料之解碼。在此,視頻訊號之解 碼處理係在上述各實施形態所説明之解碼處理。再者,依 狀況’宜將各個訊號暫時蓄積於緩衝器ex5〇8等,以可使已 解碼之聲音訊號與已解碼之視頻訊號予以同步再生。已解 碼之輸出訊號係適切地透過記憶體ex5U等,而從手機 exll4、遊戲機exll5、電視ex3〇〇等各輸出部來輸出。 而’在上述,雖將記憶體ex5ii作為LSIex500外部之構 成而予以説明,但為含於LSIex5〇〇内部之構成亦可。緩衝 器ex508亦非限於一個者,具備有複數緩衝器亦可。又, LSIex500可為一晶片化,亦可為複數晶片化。 而,在此雖設為LSI,但依集積度之差異,有時亦可稱 為 1C、系統LSI、Super LSI、Ultra LSI。 又’積體電路化之手法並不限於LSI者,以專用電路或 通用處理器實現亦可。LSI製造後,利用可程式之 147 201136319 FPGA(Field Programmable Gate Array :場可程式閘陣列)、 或可將LSI内部之電路室的連接或設定予以再構成之可重 組態處理器亦可β 再者,若因半導體技術之進歩或衍生之其他技術,而 有可置換LSI之積體電路化的技術登場,當然亦可用其技術 來進行功能塊的集積化。在可能性上,亦有生物技術之適 應等。 以上,基於實施形態說明了本發明之編碼方法 '編碼 裝置、解碼方法及解碼裝置,惟,本發明並非限於該等實 施形態者。只要不脫離本發明之趣旨,將熟知此項技藝之 人士可聯想之各種變形施加至該實施形態者,或將不同 實施形態之構成元素予以組合構建之形態,亦包含於本發 明之範圍内。 產業上之利用可能性 本發明具有可抑制編碼處理的運算量之增加、及變換 係數的資料量之增加的效果,可利用於將聲頻、靜態影像、 及動態影像予以編碼之編碼裝置,及,將以該編碼裴置編 碼過的資料予以解碼之解碼裝置。例如,本發明可利用於 聲頻機器、手機、數位照相機、BD記錄器、數位電視等各 種AV機器。 【圖式簡單說明】 第1圖係顯示習知編碼裝置構成的方塊圖。 第2圖係顯示DCT與KLT的運算量之比較之圖。 第3圖係顯示本發明實施形態丨之編碼裝置構成之一例 148 201136319 的方塊圖。 第4圖係顯示本發明實施形態1之變換處理之一例的流 程圖。 第5 A圖係將本發明實施形態1之變換部的資料流之一 例予以概念性顯示之圖。 第5 B圖係將本發明實施形態1之變換部的資料流之其 他一例予以概念性顯示之圖。 第6圖係顯示本發明實施形態1之變換處理之其他一例 的流程圖。 第7圖係將本發明實施形態1之變換部中變換係數之導 出之一例予以概念性顯示之圖。 第8圖(a)、(b)係將本發明實施形態1之矩陣運算之一例 予以概念性顯示之圖。 第9圖係顯示本發明實施形態1之變形例的編碼裝置構 成之一例的方塊圖。 第10圖係顯示本發明實施形態1之變形例的編碼裝置 運行之一例的流程圖。 第11A圖係顯示本發明實施形態2之解碼裝置構成之一 例的方塊圖。 第11B圖係顯示本發明實施形態2之解碼裝置中逆變換 部構成之一例的方塊圖。 第12圖係顯示本發明實施形態2之解碼裝置運行之一 例的流程圖。 第13 A圖係將本發明實施形態2之逆變換部的資料流之 149 201136319 一例予以概念性顯示之圖。 第13 B圖係將本發明實施形態2之逆變換部的資料流之 其他一例予以概念性顯示之圖。 第14圖係顯示本發明實施形態2之逆變換處理之一例 的流程圖。 第15圖係顯示本發明實施形態2之變形例的解碼裝置 構成之一例的方塊圖。 第16圖係顯示本發明實施形態2之變形例的解碼裝置 運行之一例的流程圖。 第17圖係顯示本發明實施形態3之編碼裝置構成之一 例的方塊圖。 第18圖係顯示本發明實施形態3之編碼裝置運行之一 例的流程圖。 第19圖係顯示本發明實施形態3之變換部構成之一例 的方塊圖。 第2 0圖係顯示本發明實施形態3之變換部構成之其他 一例的方塊圖。 第21圖係將本發明實施形態3之變換部中變換係數之 導出之一例予以概念性顯示之圖。 第2 2圖係顯示本發明實施形態3之變形例的變換部構 成之一例的方塊圖。 第2 3圖係顯示本發明實施形態3之變形例的編碼裝置 構成之一例的方塊圖。 第24A圖係顯示本發明實施形態3之變形例的編碼裝置 150 201136319 構成之一例的方塊圖。 第2 4 B圖係顯示本發明實施形態3之變形例的編碼裝置 構成之一例的方塊圖。 第2 5圖係顯示在本發明實施形態3之變形例的編碼裝 置中,已儲存於記憶體之第2變換係數與分割統合資訊的對 應關係之一例之圖。 第26A圖係將本發明實施形態3之第1變換輸出訊號, 與,第1部分訊號及第2部分訊號的關係予以概念性顯示之圖。 第2 6 B圖係將本發明實施形態3之分割統合資訊之一例 予以概念性顯示之圖。 第2 6 C圖係將本發明實施形態3之分割統合資訊之一例 予以概念性顯示之圖。 第2 7圖係顯示本發明實施形態4之解碼裝置構成之一 例的方塊圖。 第28圖係顯示本發明實施形態4之解碼裝置運行之一 例的流程圖。 第2 9圖係顯示本發明實施形態4之逆變換部構成之一 例的方塊圖。 第30圖係顯示本發明實施形態4之變形例的解碼裝置 構成之一例的方塊圖。 第3 1圖係顯示本發明實施形態4之變形例的解碼裝置 構成之一例的方塊圖。 第32圖係顯示本發明實施形態5之變換部構成之一例 的方塊圖。 151 201136319 第33圖係將本發明實施形態5之變換部中變換係數之 導出予以概念性顯示之圖。 第34圖係顯示本發明實施形態5之變形例的變換部構 成之一例的方塊圖。 弟3 5圖係顯示本發明實施形態5之變形例的變換部構 成之一例的方塊圖。 第36圖係顯示本發明實施形態6之逆變換部構成之一 例的方塊圖。 第37圖係顯示本發明實施形態6之變形例的逆變換部 構成之一例的方塊圖。 第3 8圖係顯示本發明實施形態6之變形例的逆變換部 構成之一例的方塊圖。 第39圖係將本發明實施形態7之變換部的資料流之一 例予以概念性顯示之圖。 第40圖係將本發明實施形態7之分離型構成之第2變換 的資料流之一例予以概念性顯示之圖。 第41圖係將本發明實施形態7之多維變換輸入訊號為 YUV訊號時的資料流之一例予以概念性顯示之圖。 第4 2圖係將本發明實施形態7之多維變換輸入訊號為 在空間上相鄰接之區塊訊號時的資料流之—例予以概念性 顯示之圖。 第43圖係將本發明實施形態8之逆變換部的資料流之 一例予以概念性顯示之圖。 第4 4圖係將本發明實施形態8之逆變換部的資料流之 152 201136319 例予以概念性顯示之圖。 第45圖係將本發明實施形態8之多維解碼變換輪出訊 號為Y U V訊號時的資料流之—例予以概念性顯示之圖。 第4 6圖係將本發明實施形態8之多維解碼變換輸出訊 號為在空間上相鄰接之區塊訊號時的資料流之一例予以概 念性顯示之圖。 第4 7圖係將本發明實施形態9之變換部的資料流之一 例予以概念性顯示之圖。 第4 8 A圖係顯示本發明實施形態9之變換處理之一例的 流程圖。 第4 8 B圖係顯示本發明實施形態9之變換處理之一例的 流程圖。 第4 9圖係顯示本發明實施形態9之變形例的變換處理 之一例的流程圖。 第50圖係顯示本發明實施形態9之變形例的變換處理 之一例的流程圖。 第51A圖係顯示本發明實施形態丨〇之逆變換處理之一 例的流程圖。 第51B圖係顯示本發明實施形態1〇之逆變換處理之一 例的流程圖。 第5 2圖係顯示本發明實施形態丨〇之變形例的逆變換處 理之一例的流程圖。 第53圖係顯示本發明實施形態丨〇之變形例的逆變換處 理之一例的流程圖。 153 201136319 第54A圖係顯示本發明實施形態11之編碼裝置構成之 一例的方塊圖。 第5 4 B圖係顯示本發明實施形態11之編碼裝置中每一 訊號的處理差異之一例之圖。 第55A圖係顯示本發明實施形態12之解碼裝置構成之 一例的方塊圖。 第55B圖係顯示本發明實施形態12之解碼裝置中每一 訊號的處理差異之一例之圖。 第56A圖係顯示本發明實施形態13之變換矩陣之一例 之圖。 第56B圖係顯示本發明實施形態13之絕對平均値之一 例之圖。 第56C圖係顯示本發明實施形態13之標頭(header)記述 値(即,差分)之一例之圖。 第56D圖係顯示本發明實施形態13之第2變換矩陣之一 例之圖。 第56E圖係顯示本發明實施形態13之上三角元素與下 三角元素之間符號關係之圖。 第5 6 F圖係顯示本發明實施形態13之變換矩陣之一例 之圖。 第57A圖係顯示本發明實施形態14的變換及量子化的 計時圖(timing chart)之一例之圖。 第57B圖係顯示本發明實施形態14的變換及量子化的 計時圖之一例之圖。 154 201136319 第58A圖係顯示本發明實施形態15的逆量子化及逆變 換的計時圖之一例之圖。 第5 8 B圖係顯示本發明實施形態15的逆量子化及逆變 換的計時圖之一例之圖。 第59圖係將内容遞送服務(content delivery service)予 以實現之内容供給系統的全體構成圖。 第60圖係數位播放用系統的全體構成圖。 第61圖係顯示手機外觀之圖。 第62圖係顯示手機構成例的方塊圖。 第63圖係顯示電視構成例的方塊圖。 第64圖係顯示對光碟之記錄媒體進行資訊讀寫的資訊 再生/記錄部之構成例的方塊圖。 第65圖係顯示磁碟之記錄媒體構造例之圖。 第6 6圖係顯示將各實施形態的動態影像編碼方法及動 態影像解碼方法予以實現之積體電路構成例的方塊圖。 【主要元件符號說明】 100、100a、500、500a、500c、500d、1200、1600…編碼裝置 110、UOa、510、510a、510b、510c、510d、810、810a、810b、 1210、1610·.·變換部 120、1220、1620...量子化部 130、1230、1630···熵編碼部 200、900···第1變換部 202…第1變換係數導出部 210、400…分割部 155 201136319 220、220a...第2變換部 222、222c...第2變換係數導出部 230、420...統合部 300、300a、700、700a、700b、1300...解碼裝置 310、1310...熵解碼部 320、540、1240、1320…逆量子化部 330、330a、550、730、1030、1030a、1030b、1250、1330…逆變換部 410、410a...第2逆變換部 430、1130...第1逆變換部 505.. .減法器 560、750...加法器 570、624、760、781、782…記憶體 580、770...預測部 585.. .預測控制部 590、740...控制部 601.. .第1記憶體 611.. .第2記憶體 612.. .分割統合資訊算出部 621.. .第3記憶體 623、623c、623d...局部集合判定部 790.. .選擇訊號決定部 940、941、942、1140、1141、1142…範數補正部 1401·.·第2變換處理 1402、1403...量子化處理 156 201136319 1501、1503...逆量子化處理 1502...第2逆變換處理 exlOO...内容供給系統 exlOl...網際網路 ex 102...網際網路服務提供者 exl03…串流伺服器 exl04...電話網 exl06、exl07、exl08、exl09、exllO···基地台 exlll...電腦
exl 12...PDA exll3、exll6...照相機 e x 114…附照相機之數位手機(手機) exl 15...遊戲機 exl 17...麥克風 ex200...數位播放用系統 ex201...播放局 ex202···播放衛星(衛星) ex203...電纜 ex204、ex205、ex601···天線 ex210…車 ex211…汽車導航系統(汽車導航) ex212...再生裝置 ex213、ex219...顯示器 ex214、ex215、ex216、ex607…記錄媒體 157 201136319 ex217·.·轉頻器(STB) ex218...讀取機/記錄器 ex220...遠程控制器 ex230…資訊磁軌 ex231...記錄塊 ex232...内圍區域 ex233 ·..資料記錄區域 ex234...外圍區域 ex300...電視 ex301...調諧器 ex302...調變/解調部 ex303...多工/解多工部 ex304...聲音訊號處理部 ex305...視頻訊號處理部 ex306、ex507…訊號處理部
ex307...°^'J〇A ex308、ex602…顯示部 ex309…輸出部 ex310、ex501…控制部 ex311、ex505、ex710...電源電路部 ex312...操作輸入部 ex313...橋接器 ex314、ex606...槽部 ex315...驅動器 158 201136319 ex316...數據機 ex317...介面部 ex318、ex319、ex320、ex321、ex404、ex508·.·緩衝器 ex400...資訊再生/記錄部 ex401...光學頭 ex402…調變記錄部 ex403...再生解調部 ex405...磁碟馬達 ex406...伺服控制部 ex407...系統控制部
ex500...LSI
ex502...CPU ex503...記憶體控制器 ex504... $流控制器
ex506·.·串流I/O
ex509...AVI/O ex510...匯流排 ex511...記憶體 ex603...照相機部 ex604...操作鍵 ex605...聲音輸入部 ex608...聲音輸出部 ex701···送接收電路部 ex702…LCD控制部· 159 201136319 ex703. · ·照相機介面部(照相機Ι/F部) ex704...操作輸入控制部 ex705...聲音處理部 ex706...調變解調電路部 ex707...記錄再生部 ex708...解多工部 ex709…影像解碼部 ex711...主控制部 ex712…影像編碼部 ex713...同步匯流排 a...捨入偏移 a(i,k)...包含於第1變換矩陣A,n之元素 a2(ij)...第2變換係數 &’2(丨,_〇...補正後第2變換係數 第2逆變換係數 A、A3、A4、Αηχη、Β·.·變換矩陣 ΑΛ..第1變換矩陣 A'n...第1逆變換矩陣 A2m··第2變換矩陣 A’2m...補正後第2變換矩陣 A·1,…第2逆變換矩陣 A·1’,…補正後第2逆變換矩陣
Cn...量子化係數 CTn...解碼量子化係數 160 201136319 f(i)…重量標度值 mf...量子化矩陣之逆數 mf_2...補正係數 η'..變換矩陣的乘法次數及變換矩陣的元素數 Ν、N(i)···範數
Qi、Q2…量子化處理 s...—樣量子化步驟 S〇、S|、S2、S3、S6、S7·. ·方向角度
Sa、Sb、Sb(i)、Sb(2)、Sc、、Se···集合 S(i)...矩陣元素 T...變換 Τ1...逆變換 TV..第1變換 T2...第2變換 Χη...向量 χη...變換輸入訊號、變換輸入向量 X η...解碼訊號 y11...變換輸出訊號、變換輸出向量 yAn...解碼變換輸出訊號 y’n、yA’r·.·統合後訊號 yi、y’i(i)、yuii)、y’iL(i)··.元素 y Λ..第1變換輸出訊號 y ’ Λ..補正後的第1變換輸出訊號 yAr...第1解碼變換輸出訊號 161 201136319 y1Lm...第1部分訊號 y ’ i Γ…範數補正後的第1部分訊號 y、,...第1解碼部分訊號 y1Hn_m…第2部分訊號 y ’ 1H_ ..範數補正後的第2部分訊號 yA1H_ ..第2解碼部分訊號 y2m ..第2變換輸出訊號 y%m...逆補正後第2解碼變換輸出訊號 yA2m ..第2解碼變換輸出訊號 162

Claims (1)

  1. 201136319 七、申請專利範圍: 1,一種編碼方法,其包含: 變換步驟,係將輸入訊號變換,來生成變換輸出訊 號者; 量子化步驟,係將前述變換輸出訊號予以量子化, 來生成量子化係數者;及 熵編碼(entropy coding)步驟,係將前述量子化係數 予以熵編碼,來生成編碼訊號者; 且’前述變換步驟包含: >第1變換步冑,係使用帛i變換係數對前述輸入訊號 施以第1變換,來生成第1變換輸出訊號者;及 第2變換步驟,係使用第2變換係數對第丨部分訊號 把以第2變換’來生成第2變換輸出訊號,且將包含所生 成的第2變換輸出訊號與第2部分訊號之前述變換輸出 訊號予以輸出者,前述第1部分訊號係前述第I變換輸出 訊號的-部分,而前述第2部分訊號係前述第i變換輸出 訊號當中前述第1部分訊號以外的部分; 又,前述第2變換步驟中, 將前述第1變換輸出訊號當中作為前述第1部分訊 5虎之將成為前述第2變換之對象的範圍、與前述第2變換 係數之至少—方,在時間或空間上Μ適應性地決定。 如申凊專利範圍第1項之編碼方法,其中前述第2變換步 :中’將前述第1變換輸出訊號當中作為前述第i部分訊 將成為前述第2變換之對象的範圍、與前述第2變換 163 201136319 係數之至少一方,基於預定編碼參數予以適應性地決 定。 3. 如申請專利範圍第2項之編碼方法,其中前述編碼參數 係顯示預先規定之複數預測方法當中的一個預測方 法, 且,前述編碼方法更包含: 編碼預測步驟,係基於前述編碼參數,生成含於編 碼對象之輸入影像的編碼對象塊之預測像素者;及 差分步驟,係生成預測誤差影像者,該預測誤差影 像係前述編碼對象塊的像素與前述預測像素的差分; 又,前述第1變換步驟中,係將顯示前述預測誤差 影像的訊號作為前述輸入訊號來施以前述第1變換。 4. 如申請專利範圍第3項之編碼方法,其中前述第2變換步 驟中,當前述編碼參數顯示之預測方法係顯示往預定方 向之外插者時,將構成前述第1變換輸出訊號之複數係 數値當中包含前述預定方向的係數値之範圍,決定為前 述第2變換的對象。 5. 如申請專利範圍第4項之編碼方法,其中前述第2變換步 驟中,前述方向為大致水平方向時,係將構成前述第1 變換輸出訊號之複數係數値當中包含横方向的係數値 之範圍,決定為前述第2變換的對象。 6. 如申請專利範圍第4項之編碼方法,其中前述第2變換步 驟中,前述方向為大致垂直方向時,係將構成前述第1 變換輸出訊號之複數係數値當中包含縱方向的係數値 164 201136319 之範圍,決定為前述第2變換的對象D 如申請專利範圍第2項之 係從複數變換矩陣之W 、中^編碼參數 中扎足一個變換矩陣的索引資 I前述複數變換_係具有彼此相異之係數値之植 #, ' 則地珩z燹換步驟中,仫乂 8. 將“核碼參數所指定 的隻換矩陣決定為前述第2變換係數。 一種解碼方法,其包含: 曰網解碼步驟,係將編碼訊號予賴解碼,來生成解 碼量子化係數者; 逆量子化”’係'將前述解碼量子化係數予以逆量 化來生成解碼變換輸出訊號者;及 逆變換步驟,係將前述解碼變換輸出訊號予以逆變 換’來生成解碼訊號者; 且,述逆變換步驟包含: ◎第1逆變換步驟,係使用第1逆變換係數對第2解碼 '是換輸出訊號施以第1逆變換,來生成第i解碼部分訊 ^㈣第1㈣㈣輸出訊號係前述解碼變換輸出訊 遽的一部分者;及 第11£變換步驟,係使用第1逆變換係數,對包含前 述第1解碼部分訊號與第1解碼部分訊號的第!解碼變換 輸出訊號施以第1逆變換,來生成前述解碼訊號,前述 第2解碼部分訊號係前述解碼變換輸出訊號當中前述第 165 1 解碼變換輸出訊號以外的部分者; 201136319 又,前述第2逆變換步驟中, 將前述解碼變換輸出訊號當中作為前述第2解碼變 換輸出訊號之將成為前述第2逆變換之對象的範圍、與 前述第2逆變換係數之至少一方,在時間或空間上予以 適應性地決定。 9. 如申請專利範圍第8項之解碼方法,其中前述第2逆變換 步驟中,將前述解碼變換輸出訊號當中作為前述第2解 碼變換輸出訊號之將成為前述第2逆變換之對象的範 圍、與前述第2逆變換係數之至少一方,基於預定編碼 參數予以適應性地決定。 10. 如申請專利範圍第9項之解碼方法,其中前述編碼訊號 係編碼有預測誤差影像的訊號,前述預測誤差影像係顯 示輸入影像的預測誤差者, 前述編碼參數係顯示預先規定之複數預測方法當 中的一個預測方法, 且,前述第1逆變換步驟中,前述解碼方法更包含: 預測步驟,係基於前述編碼參數,生成含於前述預 測誤差影像的解碼對象塊之預測像素者;及 加法步驟,係將前述解碼對象塊的像素與前述預測 像素累加,來還原前述輸入影像者。 11. 如申請專利範圍第10項之解碼方法,其中前述第2逆變 換步驟中,當前述編碼參數顯示之預測方法係顯示往預 定方向之外插者時,將構成前述解碼變換輸出訊號之複 數係數値當中包含前述預定方向的係數値之範圍,決定 166 201136319 為前述第2逆變換的對象。 12·如申請專利範圍第11項之解碼方法,其中前述第2逆變 換步驟中’前述方“大致水平方㈣,雜構成前述 解碼變換輸出訊號之複數係數値當中包含横方向的係 數俊之圍,決定為前述第2逆變換的對象。 如申4專鄕圍如項之解碼方法,其巾前述第2逆變 換步驟中,前述方向為大致垂直方向時,係將構成前述 解碼變換輸出訊號之複數係數値當中包含縱方向的係 數値之範圍’決定為前述第2逆變換的對象。 ⑷如申請專·„9項之解碼方法,其中前述編碼參數 係從複數變換矩陣之中指定一個變換矩陣的索引資 訊,前述複數變換矩陣係具有彼此相異之係數値之植 者, , 月’J述第2逆變換步驟中,係將由前述編碼參數所指 定的變換矩陣,決定為前述第2逆變換係數。 15. —種編碼裝置,其具有 變換部’係、將輸人訊號予以變換,來生成變換輸出 訊號者; 量子化部,係將前述變換輸出訊號予以量子化,來 生成量子化係數者;及 彌編碼部,係將前述量子化係數予以熵編碼,來生 成編碼訊號者; 且’前述變換部具有: 第1變換部,係使用第丨變換係數對前述輸入訊號施 167 201136319 以第1變換’來生成第1變換輸出訊號者;及 第2變換部,係使用第2變換係數對第〗部分訊號施 以第2變換,來生成第2變換輸出訊號,且將包含所生成 的第2變換輸出訊號與第2部分訊號之前述變換輸出訊 號予以輸出者,前述第1部分訊號係前述第1變換輸出訊 號的一部分’而前述第2部分訊號係前述第1變換輸出訊 號當中前述第1部分訊號以外的部分; 且’前述第2變換部係將前述第J變換輸出訊號當中 作為前述第1部分訊號之將成為前述第2變換之對象的 範圍、與前述第2變換係數之至少一方,在時間或空間 上予以適應性地決定。 16· —種解碼裝置,其具有·· 熵解碼部’係將編碼訊號予以熵解碼,來生成解碼 量子化係數者; 逆量子化部,係將前述解碼量子化係數予以逆量子 化,來生成解碼變換輸出訊號者;及 逆變換部,係將前述解碼變換輸出訊號予以逆變 換’來生成解碼訊號者; 且’則述逆變換部具有: 第2逆變換部,係使用第2逆變換係數對第]解碼變 換輸出訊號施以第2逆變換,來生成第碑碼部分訊號, 削逑第2解碼變換輸出訊號係前述解碼變換輸出訊號的 一部分者;及 第1逆變換部,係使用第i逆變換係數,對包含前述 168 201136319 第1解碼部分訊號與第2解碼部分訊號的第!解碼變換輸 出訊號施以第1逆變換’來生成前述解碼訊號,前述第2 解碼部分訊號係前述解碼變換輸出訊號當中前述第娜 碼變換輸出訊號以外的部分者; a且’前述第2逆變換部係將前述解碼變換輸出訊號 當中作為前述第2解碼變換輸出訊號之將成為前述第2 逆變換之對象的範圍、與前述第2逆變換係數之至少一 方,在時間或空間上予以適應性地決定。 17·—種積體電路,其具備: 變換部’係將輸人《予以變換,來生成變換輸出 訊號者; 量子化部,係將前述變換輸出訊號予以量子化來 生成量子化係數者;及 熵編碼部,係將前述量子化係數予以熵編碼,來生 成編碼訊號者; 且’前述變換部具有: 第1變換部,係使用第1變換係數對前述輸入訊號施 以第1變換,來生成第1變換輸出訊號者;及 第2變換部,係使用第2變換係數對第丨部分訊號施 以第2變換,來生成第2變換輸出訊號,且將包含所生成 的第2變換輸出訊號與第2部分訊號之前述變換輸出訊 號予以輪出者,前述第丨部分訊號係前述第丨變換輸出訊 號的一部分’而前述第2部分訊號係前述第1變換輪出訊 號當中前述第1部分訊號以外的部分; 169 201136319 且,前述第2變換部係將前述第1變換輸出訊號當中 作為前述第1部分訊號之將成為前述第2變換之對象的 範圍、與前述第2變換係數之至少一方,在時間或空間 上予以適應性地決定。 18. —種積體電路,其具備: 熵解碼部,係將編碼訊號予以熵解碼,來生成解碼 量子化係數者; 逆量子化部,係將前述解碼量子化係數予以逆量子 化,來生成解碼變換輸出訊號者;及 逆變換部,係將前述解碼變換輸出訊號予以逆變 換,來生成解碼訊號者; 且,前述逆變換部具有: 第2逆變換部,係使用第2逆變換係數對第2解碼變 換輸出訊號施以第2逆變換,來生成第1解碼部分訊號 者,前述第2解碼變換輸出訊號係前述解碼變換輸出訊 號的一部分;及 第1逆變換部,係使用第1逆變換係數,對包含前述 第1解碼部分訊號與第2解碼部分訊號的第1解碼變換輸 出訊號施以第1逆變換,來生成前述解碼訊號,前述第2 解碼部分訊號係前述解碼變換輸出訊號當中前述第2解 碼變換輸出訊號以外的部分者; 且,前述第2逆變換部係將前述解碼變換輸出訊號 當中作為前述第2解碼變換輸出訊號之將成為前述第2 逆變換之對象的範圍、與前述第2逆變換係數之至少一 170 201136319 方’在時間或空間上予以適應性地決定。 19. 一種使電腦執行編碼方法的程式,該編碼方法包含: 變換步驟,係將輸入訊號予以變換,來生成變換輸 出訊號者; 量子化步驟,係將前述變換輸出訊號予以量子化, 來生成量子化係數者;及 彌編碼步驟,係將前述量子化係數予以熵編碼,來 生成編碼訊號者; 且’前述變換步驟包含: 第1變換步驟,係使用第1變換係數對前述輸入訊號 施以第1變換’來生成第1變換輸出訊號;及 第2變換步驟,係使用第2變換係數對第丨部分訊號 施以第2變換,來生成第2變換輸出訊號,且將包含所生 成的第2變換輸出訊號與第2部分訊號之前述變換輸出 訊號予以輸出,前述第1部分訊號係前述第1變換輸出訊 號的一部分,而前述第2部分訊號係前述第1變換輸出訊 號當中前述第1部分訊號以外的部分者; 又’前述第2變換步驟中, 將前述第1變換輸出訊號當中作為前述第丨部分訊 號之將成為前述第2變換之對象的範圍、與前述第;換 係數之至少—方’在㈣或空間上予以適應性地決定。 .種使f腦執行解碼方法的程式,該解碼方法包含· 熵解碼步驟’係將編碼訊號予以熵解碼,來 碼量子化係數者; 战解 171 201136319 逆量子化步驟,係將前述解碼量子化係數予以逆量 子化,來生成解碼變換輸出訊號者;及 逆變換步驟,係將前述解碼變換輸出訊號予以逆變 換,來生成解碼訊號者; 且,前述逆變換步驟包含: 第2逆變換步驟,係使用第2逆變換係數對第2解碼 變換輸出訊號施以第2逆變換,來生成第1解碼部分訊 號,前述第2解碼變換輸出訊號係前述解碼變換輸出訊 號的一部分;及 第1逆變換步驟,係使用第1逆變換係數,對包含前 述第1解碼部分訊號與第2解碼部分訊號的第1解碼變換 輸出訊號施以第1逆變換,來生成前述解碼訊號,前述 第2解碼部分訊號係前述解碼變換輸出訊號當中前述第 2解碼變換輸出訊號以外的部分; 又,前述第2逆變換步驟中, 將前述解碼變換輸出訊號當中作為前述第2解碼變 換輸出訊號之將成為前述第2逆變換之對象的範圍、與 前述第2逆變換係數之至少一方,在時間或空間上予以 適應性地決定。 172
TW099126302A 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device TW201136319A (en)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2009183791 2009-08-06
JP2009192618 2009-08-21
JP2009192627 2009-08-21
US30909010P 2010-03-01 2010-03-01
US34570310P 2010-05-18 2010-05-18
US36458010P 2010-07-15 2010-07-15

Publications (1)

Publication Number Publication Date
TW201136319A true TW201136319A (en) 2011-10-16

Family

ID=43544155

Family Applications (4)

Application Number Title Priority Date Filing Date
TW099126306A TW201132129A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device
TW099126304A TW201138475A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device
TW099126299A TW201119406A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device
TW099126302A TW201136319A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device

Family Applications Before (3)

Application Number Title Priority Date Filing Date
TW099126306A TW201132129A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device
TW099126304A TW201138475A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device
TW099126299A TW201119406A (en) 2009-08-06 2010-08-06 Encoding method, decoding method, encoding device and decoding device

Country Status (7)

Country Link
US (4) US20120127003A1 (zh)
EP (4) EP2464015A4 (zh)
JP (4) JPWO2011016247A1 (zh)
KR (4) KR20120046724A (zh)
CN (4) CN102474271A (zh)
TW (4) TW201132129A (zh)
WO (4) WO2011016246A1 (zh)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9106933B1 (en) * 2010-05-18 2015-08-11 Google Inc. Apparatus and method for encoding video using different second-stage transform
US8913666B2 (en) * 2010-10-01 2014-12-16 Qualcomm Incorporated Entropy coding coefficients using a joint context model
US9210442B2 (en) 2011-01-12 2015-12-08 Google Technology Holdings LLC Efficient transform unit representation
US9380319B2 (en) 2011-02-04 2016-06-28 Google Technology Holdings LLC Implicit transform unit representation
US20130003856A1 (en) * 2011-07-01 2013-01-03 Samsung Electronics Co. Ltd. Mode-dependent transforms for residual coding with low latency
PL3346708T3 (pl) * 2012-04-16 2021-03-08 Electronics And Telecommunications Research Institute Sposób kodowania obrazu
CN104335582B (zh) * 2012-06-12 2019-03-08 太阳专利托管公司 动态图像编解码方法以及动态图像编解码装置
EP2870770A2 (en) 2012-07-09 2015-05-13 VID SCALE, Inc. Power aware video decoding and streaming
JP6210368B2 (ja) * 2012-09-18 2017-10-11 サン パテント トラスト 画像復号方法および画像復号装置
CN104704827B (zh) 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
JP2014123865A (ja) * 2012-12-21 2014-07-03 Xacti Corp 画像処理装置及び撮像装置
JP6157114B2 (ja) * 2012-12-28 2017-07-05 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US9219915B1 (en) 2013-01-17 2015-12-22 Google Inc. Selection of transform size in video coding
KR102063385B1 (ko) 2013-01-30 2020-01-07 인텔 코포레이션 차세대 비디오용 콘텐츠 적응적 엔트로피 코딩
US9544597B1 (en) 2013-02-11 2017-01-10 Google Inc. Hybrid transform in video encoding and decoding
US9967559B1 (en) 2013-02-11 2018-05-08 Google Llc Motion vector dependent spatial transformation in video coding
US9674530B1 (en) 2013-04-30 2017-06-06 Google Inc. Hybrid transforms in video coding
US9554152B2 (en) * 2013-07-12 2017-01-24 Qualcomm Incorporated Concurrent processing of horizontal and vertical transforms
US9154782B2 (en) * 2013-09-16 2015-10-06 Magnum Semiconductor, Inc. Apparatuses and methods for adjusting coefficients using dead zones
KR101789954B1 (ko) * 2013-12-27 2017-10-25 인텔 코포레이션 차세대 비디오 코딩을 위한 콘텐츠 적응적 이득 보상된 예측
US9432696B2 (en) 2014-03-17 2016-08-30 Qualcomm Incorporated Systems and methods for low complexity forward transforms using zeroed-out coefficients
US9516345B2 (en) 2014-03-17 2016-12-06 Qualcomm Incorporated Systems and methods for low complexity forward transforms using mesh-based calculations
JP6363217B2 (ja) * 2014-04-04 2018-07-25 エーエスエムエル ネザーランズ ビー.ブイ. 制御システム、位置決めシステム、リソグラフィ装置、制御方法、デバイス製造方法及び制御プログラム
TWI551124B (zh) * 2014-07-11 2016-09-21 晨星半導體股份有限公司 應用於視訊系統之編碼/解碼方法及編碼/解碼裝置
CN105516730B (zh) * 2014-09-24 2018-04-24 晨星半导体股份有限公司 视讯编码装置及视讯解码装置以及其编码与解码方法
US9565451B1 (en) 2014-10-31 2017-02-07 Google Inc. Prediction dependent transform coding
US9769499B2 (en) 2015-08-11 2017-09-19 Google Inc. Super-transform video coding
US11394972B2 (en) * 2015-08-19 2022-07-19 Lg Electronics Inc. Method and device for encoding/decoding video signal by using optimized conversion based on multiple graph-based model
EP3345396A4 (en) 2015-09-01 2019-03-27 Telefonaktiebolaget LM Ericsson (publ) SPATIAL IMPROVEMENT OF TRANSFORMER BLOCKS
US10277905B2 (en) 2015-09-14 2019-04-30 Google Llc Transform selection for non-baseband signal coding
US10164655B2 (en) * 2015-09-25 2018-12-25 Western Digital Technologies, Inc. Cache oblivious algorithm for butterfly code
US10491922B2 (en) * 2015-09-29 2019-11-26 Qualcomm Incorporated Non-separable secondary transform for video coding
US9807423B1 (en) 2015-11-24 2017-10-31 Google Inc. Hybrid transform scheme for video coding
EP3335215B1 (en) * 2016-03-21 2020-05-13 Huawei Technologies Co., Ltd. Adaptive quantization of weighted matrix coefficients
US10623774B2 (en) 2016-03-22 2020-04-14 Qualcomm Incorporated Constrained block-level optimization and signaling for video coding tools
FR3050598B1 (fr) * 2016-04-26 2020-11-06 Bcom Procede de decodage d'une image numerique, procede de codage, dispositifs, et programmes d'ordinateurs associes
RU2020129092A (ru) * 2016-05-13 2020-10-05 Сони Корпорейшн Устройство и способ обработки изображения
MX2018013462A (es) * 2016-05-13 2019-03-28 Sony Corp Aparato y metodo de procesamiento de imagenes.
KR102424062B1 (ko) 2016-08-24 2022-07-22 소니그룹주식회사 화상 처리 장치, 화상 처리 방법 및 프로그램
US11095893B2 (en) 2016-10-12 2021-08-17 Qualcomm Incorporated Primary transform and secondary transform in video coding
EP3349451A1 (en) 2017-01-11 2018-07-18 Thomson Licensing Method and apparatus for selecting a coding mode used for encoding/decoding a residual block
WO2018166429A1 (en) * 2017-03-16 2018-09-20 Mediatek Inc. Method and apparatus of enhanced multiple transforms and non-separable secondary transform for video coding
US20200177889A1 (en) * 2017-03-21 2020-06-04 Lg Electronics Inc. Transform method in image coding system and apparatus for same
US10855997B2 (en) * 2017-04-14 2020-12-01 Mediatek Inc. Secondary transform kernel size selection
JP2020109884A (ja) * 2017-04-28 2020-07-16 シャープ株式会社 動画像符号化装置及び動画像復号装置
US10979736B2 (en) 2017-06-08 2021-04-13 Lg Electronics Inc. Method and apparatus for performing low-complexity computation of transform kernel for video compression
US11070806B2 (en) 2017-06-28 2021-07-20 Lg Electronics Inc. Method and apparatus for performing low complexity computation in transform kernel for video compression
CN114449270B (zh) 2017-07-04 2023-09-26 三星电子株式会社 使用多核变换的视频解码/编码方法和设备
TWI862000B (zh) * 2017-07-13 2024-11-11 美商松下電器(美國)知識產權公司 編碼裝置、解碼裝置及記錄媒體
TWI777907B (zh) * 2017-07-13 2022-09-11 美商松下電器(美國)知識產權公司 編碼裝置、編碼方法、解碼裝置、解碼方法及電腦可讀取之非暫時性媒體
WO2019022099A1 (ja) 2017-07-28 2019-01-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
EP3644606B1 (en) * 2017-07-28 2024-07-03 Panasonic Intellectual Property Corporation of America Encoding device and encoding method
KR102738221B1 (ko) * 2017-12-15 2024-12-05 엘지전자 주식회사 변환에 기반한 영상 코딩 방법 및 그 장치
US10860348B2 (en) * 2018-03-26 2020-12-08 Bank Of America Corporation Computer architecture for emulating a correlithm object processing system that places portions of correlithm objects and portions of a mapping table in a distributed node network
US10915340B2 (en) * 2018-03-26 2021-02-09 Bank Of America Corporation Computer architecture for emulating a correlithm object processing system that places multiple correlithm objects in a distributed node network
US10915338B2 (en) * 2018-03-26 2021-02-09 Bank Of America Corporation Computer architecture for emulating a correlithm object processing system that places portions of correlithm objects in a distributed node network
CN111937398B (zh) * 2018-03-30 2023-04-21 索尼公司 图像处理装置和方法
US11070837B2 (en) * 2018-04-02 2021-07-20 Panasonic Intellectual Property Corporation Of America Encoding method, decoding method, encoder, and decoder
EP3783569A4 (en) * 2018-04-19 2021-06-02 Panasonic Intellectual Property Corporation of America THREE-DIMENSIONAL DATA ENCODING PROCESS, THREE-DIMENSIONAL DATA DECODING PROCESS, THREE-DIMENSIONAL DATA ENCODING DEVICE AND TRIDIMENSIONAL DATA DECODING DEVICE
CN112166609B (zh) 2018-06-08 2024-10-18 株式会社Kt 用于处理视频信号的方法和设备
KR102745742B1 (ko) 2018-07-06 2024-12-20 엘지전자 주식회사 변환에 기반한 영상 코딩 방법 및 그 장치
US11412260B2 (en) * 2018-10-29 2022-08-09 Google Llc Geometric transforms for image compression
CN119094755A (zh) 2019-03-04 2024-12-06 Lg 电子株式会社 基于帧内块编译的视频或图像编译
US11240534B2 (en) * 2019-04-05 2022-02-01 Qualcomm Incorporated Extended multiple transform selection for video coding
CN118175313A (zh) 2019-04-16 2024-06-11 Lg电子株式会社 图像解码和编码方法、数据的发送方法及存储介质
CA3286847A1 (en) 2019-04-16 2025-11-29 Lg Electronics Inc. Transform for matrix-based intra-prediction in image coding
US11122297B2 (en) 2019-05-03 2021-09-14 Google Llc Using border-aligned block functions for image compression
WO2020256393A1 (ko) 2019-06-17 2020-12-24 엘지전자 주식회사 루마 맵핑 기반 비디오 또는 영상 코딩
CN118474351A (zh) 2019-06-17 2024-08-09 Lg 电子株式会社 基于亮度映射与色度缩放的视频或图像编译
CN111103829B (zh) * 2019-12-11 2024-05-17 旋智电子科技(上海)有限公司 一种电机控制装置和方法
US12262016B2 (en) * 2019-12-11 2025-03-25 Sony Group Corporation Image processing device, bit stream generation method, coefficient data generation method, and quantization coefficient generation method
JP2023517695A (ja) * 2020-03-12 2023-04-26 インターデジタル ブイシー ホールディングス フランス ビデオ符号化及び復号化のための方法並びに装置
US11197004B1 (en) * 2020-07-02 2021-12-07 Google Llc Inter-prediction mode-dependent transforms for video coding
WO2022069331A1 (en) * 2020-09-29 2022-04-07 Interdigital Vc Holdings France, Sas Karhunen loeve transform for video coding
US12368890B2 (en) 2021-05-12 2025-07-22 Nokia Technologies Oy Method, an apparatus and a computer program product for video encoding and video decoding
US12452423B2 (en) * 2021-12-03 2025-10-21 Intel Corporation Low frequency non-separable transform and multiple transform selection deadlock prevention

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2526675B2 (ja) * 1989-08-28 1996-08-21 日本電気株式会社 動画像の直交変換符号化方式およびその復号化の方式
GB2252002B (en) * 1991-01-11 1995-01-04 Sony Broadcast & Communication Compression of video signals
KR960006762B1 (ko) * 1992-02-29 1996-05-23 삼성전자주식회사 화상부호화를 위한 효율적인 2차원 데이타의 주사선택회로
US5724096A (en) * 1995-12-29 1998-03-03 Daewoo Electronics Co., Ltd. Video signal encoding method and apparatus employing inter-block redundancies
US5942002A (en) * 1996-03-08 1999-08-24 Neo-Lore Method and apparatus for generating a transform
US6611626B1 (en) * 1999-12-10 2003-08-26 Xerox Corporation Method of compressing JPEG files using a conditional transform
US6934730B2 (en) * 2000-10-13 2005-08-23 Xpriori, Llc Method and system for generating a transform
JP2004046499A (ja) * 2002-07-11 2004-02-12 Matsushita Electric Ind Co Ltd データ処理システム
JP4055203B2 (ja) * 2002-09-12 2008-03-05 ソニー株式会社 データ処理装置およびデータ処理方法、記録媒体、並びにプログラム
US7630435B2 (en) * 2004-01-30 2009-12-08 Panasonic Corporation Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof
JP2006054846A (ja) * 2004-07-12 2006-02-23 Sony Corp 符号化方法、符号化装置、復号方法、復号装置およびそれらのプログラム
US7933337B2 (en) * 2005-08-12 2011-04-26 Microsoft Corporation Prediction of transform coefficients for image compression
WO2007035056A1 (en) * 2005-09-26 2007-03-29 Samsung Electronics Co., Ltd. Method and apparatus for entropy encoding and entropy decoding fine-granularity scalability layer video data
JP4334533B2 (ja) * 2005-11-24 2009-09-30 株式会社東芝 動画像符号化/復号化方法および装置
JP2007243399A (ja) * 2006-03-07 2007-09-20 Matsushita Electric Ind Co Ltd データ圧縮方式およびその関連技術
WO2008012918A1 (fr) * 2006-07-28 2008-01-31 Kabushiki Kaisha Toshiba Procédé et appareil de codage et de décodage d'image
US8369638B2 (en) * 2008-05-27 2013-02-05 Microsoft Corporation Reducing DC leakage in HD photo transform

Also Published As

Publication number Publication date
EP2464015A1 (en) 2012-06-13
CN102474272A (zh) 2012-05-23
EP2464013A4 (en) 2012-07-18
US20120128066A1 (en) 2012-05-24
US20120134412A1 (en) 2012-05-31
JPWO2011016249A1 (ja) 2013-01-10
EP2464016A1 (en) 2012-06-13
CN102474271A (zh) 2012-05-23
EP2464014A4 (en) 2012-08-01
CN102474268A (zh) 2012-05-23
JPWO2011016248A1 (ja) 2013-01-10
EP2464014A1 (en) 2012-06-13
KR20120046727A (ko) 2012-05-10
US20120134408A1 (en) 2012-05-31
WO2011016247A1 (ja) 2011-02-10
WO2011016249A1 (ja) 2011-02-10
EP2464015A4 (en) 2012-07-11
EP2464016A4 (en) 2012-07-18
JPWO2011016246A1 (ja) 2013-01-10
KR20120046726A (ko) 2012-05-10
EP2464013A1 (en) 2012-06-13
WO2011016248A1 (ja) 2011-02-10
TW201138475A (en) 2011-11-01
KR20120046724A (ko) 2012-05-10
WO2011016246A1 (ja) 2011-02-10
JPWO2011016247A1 (ja) 2013-01-10
KR20120046725A (ko) 2012-05-10
CN102474269A (zh) 2012-05-23
US20120127003A1 (en) 2012-05-24
TW201132129A (en) 2011-09-16
TW201119406A (en) 2011-06-01

Similar Documents

Publication Publication Date Title
TW201136319A (en) Encoding method, decoding method, encoding device and decoding device
CN102124741B (zh) 图像编码方法及图像编码装置
TW201134225A (en) Encoding method, decoding method, encoding device and decoding device
KR102063385B1 (ko) 차세대 비디오용 콘텐츠 적응적 엔트로피 코딩
KR101677406B1 (ko) 차세대 비디오용 비디오 코덱 아키텍처
CN103563379B (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
TW201136318A (en) Encoding method, decoding method, encoding device and decoding device
TW201110708A (en) Image coding method and image decoding method
JPWO2010050156A1 (ja) 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、集積回路およびプログラム
TW201125370A (en) Decoding method, decoder apparatus, encoding method, and encoder apparatus
TW201246937A (en) Image encoding method, image decoding method, image encoding device, image decoding device, and image encoding/decoding device
TW201246939A (en) Picture encoding method, picture encoding device, picture decoding method, picture decoding device and picture encoding decoding device
CN103765903B (zh) 图像解码装置、图像编码装置、图像解码方法及图像编码方法
US11539965B2 (en) Scanning orders for non-transform coding
JP5999515B2 (ja) 画像処理装置、及び、画像処理方法