JP2009523259A - Multi-channel signal decoding and encoding method, recording medium and system - Google Patents
Multi-channel signal decoding and encoding method, recording medium and system Download PDFInfo
- Publication number
- JP2009523259A JP2009523259A JP2008550238A JP2008550238A JP2009523259A JP 2009523259 A JP2009523259 A JP 2009523259A JP 2008550238 A JP2008550238 A JP 2008550238A JP 2008550238 A JP2008550238 A JP 2008550238A JP 2009523259 A JP2009523259 A JP 2009523259A
- Authority
- JP
- Japan
- Prior art keywords
- channel
- signal
- decoding
- spatial information
- left channel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
- H04S5/005—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation of the pseudo five- or more-channel type, e.g. virtual surround
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/06—Receivers
- H04B1/16—Circuits
- H04B1/1646—Circuits adapted for the reception of stereophonic signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Algebra (AREA)
- Mathematical Analysis (AREA)
- Theoretical Computer Science (AREA)
- Pure & Applied Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Optimization (AREA)
- Stereophonic System (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
マルチチャンネル信号の復号化及び符号化方法、記録媒体及びシステムを提供する。これにより、マルチチャンネルからダウンミックスされた信号に対して左側チャンネル及び右側チャンネルを優先的にアップミキシングすることによって、スケーラブルチャンネル復号化時にも左側及び右側の音質が低下せずに高音質で出力できる。
A multi-channel signal decoding and encoding method, a recording medium, and a system are provided. As a result, the left channel and the right channel are preferentially upmixed with respect to the downmixed signal from the multi-channel, so that the sound quality on the left side and the right side can be output with high quality without degrading even when scalable channel decoding is performed. .
Description
本発明の一実施形態は、オーディオコーディングに係り、特にマルチチャンネルにオーディオ信号を符号化／復号化するサラウンドオーディオコーディングに関する。 One embodiment of the present invention relates to audio coding, and more particularly, to surround audio coding for encoding / decoding audio signals in multiple channels.
一般的に、マルチチャンネルオーディオコーディングには、ウェーブフォームマルチチャンネルオーディオコーディング及びパラメトリックマルチチャンネルオーディオコーディングがある。ウェーブフォームマルチチャンネルオーディオコーディングには、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）−２ ＭＣオーディオコーディング、ＡＡＣ ＭＣオーディオコーディング及びＢＳＡＣ／ＡＶＳ ＭＣオーディオコーディングなどがあり、５個のチャンネル信号を入力として５個のチャンネル信号に出力する。パラメトリックマルチチャンネルオーディオコーディングは、ＭＰＥＧサラウンドコーディングがあり、一つまたは二つの入力チャンネルを６個または８個のマルチチャンネルに出力する。 In general, multi-channel audio coding includes waveform multi-channel audio coding and parametric multi-channel audio coding. Waveform multi-channel audio coding includes MPEG (Moving Picture Experts Group) -2 MC audio coding, AAC MC audio coding, BSAC / AVS MC audio coding, etc. There are five channel signals as input. Output to. Parametric multi-channel audio coding includes MPEG surround coding, and outputs one or two input channels to six or eight multi-channels.
ここで、ＭＰＥＧサラウンドコーディングは、図１Ａに示した５−１−５の１ツリー構造と、図１Ｂに示した５−１−５の２ツリー構造とを利用することによって、マルチチャンネルに信号を復号化することによってアップミキシングして出力する。かかるツリー構造は、モノ信号を入力されてＯＴＴ（１−ｔｏ−２）モジュールの組み合わせで処理してＦＬ（Ｆｒｏｎｔ Ｌｅｆｔ）、ＦＲ（Ｆｒｏｎｔ Ｒｉｇｈｔ）、Ｃ（Ｃｅｎｔｅｒ）、ＬＦＥ（Ｌｏｗ Ｆｒｅｑｕｅｎｃｙ Ｅｎｈａｎｃｅｍｅｎｔ）、ＢＬ（Ｂａｃｋ Ｌｅｆｔ）及びＢＲ（Ｂａｃｋ Ｒｉｇｈｔ）に該当するマルチチャンネルに出力する。 Here, the MPEG surround coding uses a 5-1-5 1-tree structure shown in FIG. 1A and a 5-1-5 2-tree structure shown in FIG. By decoding, upmixing is output. Such a tree structure is formed by inputting a mono signal and processing it by a combination of OTT (1-to-2) modules to process FL (Front Left), FR (Front Right), C (Center), LFE (Low Frequency Enhancement), The data is output to multi-channels corresponding to BL (Back Left) and BR (Back Right).
図１ＡのＯＴＴ０モジュールから出力される信号を見れば、５−１−５の１ツリー構造では、ＦＬ，ＦＲ，Ｃ及びＬＦＥがミックスされた信号、ＢＬ及びＢＲがミックスされた信号として出力される。そして、図１ＢのＯＴＴ０モジュールから出力される信号を見れば、５−１−５の２ツリー構造では、ＦＬ，ＢＬ，ＦＲ及びＢＲがミックスされた信号、Ｃ及びＬＦＥがミックスされた信号として出力される。しかし、図１Ａに示した５−１−５の１ツリー構造及び図１Ｂに示した５−１−５の２ツリー構造に設けられたＯＴＴ０モジュールの出力端でプルーニングを行う場合、ＯＴＴ０モジュールは、前方チャンネル及び後方チャンネルと関連して最初にアップミキシングするので、左側チャンネル及び右側チャンネルに対して音質が低下するという問題点を有する。 Referring to the signal output from the OTT 0 module in FIG. 1A, in the one-tree structure of 5-1-5, the signal is output as a signal in which FL, FR, C, and LFE are mixed, and as a signal in which BL and BR are mixed. The If the signal output from the OTT 0 module of FIG. 1B is seen, in the 2-tree structure of 5-1-5, the signal in which FL, BL, FR, and BR are mixed, and the signal in which C and LFE are mixed are shown. Is output. However, when pruning is performed at the output end of the OTT 0 module provided in the 1-tree structure of 5-1-5 shown in FIG. 1A and the 2-tree structure of 5-1-5 shown in FIG. 1B, the OTT 0 module Has a problem in that sound quality is deteriorated with respect to the left channel and the right channel since the upmixing is first performed in association with the front channel and the rear channel.
これにより、後述する本発明の実施形態は、かかる問題点を克服するための実施形態である。 Thus, the embodiment of the present invention described later is an embodiment for overcoming such a problem.
本発明が解決しようとする課題は、左側チャンネル及び右側チャンネルを最後にダウンミキシングして符号化し、左側チャンネル及び右側チャンネルを優先的にアップミキシングして復号化するマルチチャンネル符号化／復号化方法及びシステムを提供するところにある。 A problem to be solved by the present invention is a multi-channel encoding / decoding method in which the left channel and the right channel are finally downmixed and encoded, and the left channel and the right channel are preferentially upmixed and decoded. The system is in place.
本発明のその他の側面及び利点は、以下の明細書で明細書の内容それ自体あるいは本発明の実行により理解される。 Other aspects and advantages of the present invention will be understood in the following specification, either by the content itself or by practice of the invention.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化方法は、符号化端でマルチチャンネルからダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、左側チャンネルと右側チャンネルとの間の情報を含む。 In order to solve the above problems, a multi-channel decoding method according to an embodiment of the present invention uses a signal downmixed from a multi-channel at an encoding end to generate a signal to be input to a correlator based on spatial information. Performing the step of inputting the generated signal into a dicorillator and performing the dichroic process, and using the spatial information to mix the downmixed signal and the dichroic signal. And the spatial information includes information between a left channel and a right channel.
前記課題を解決するために、定義されたチャンネルからなるマルチチャンネル信号を入力され、入力されたマルチチャンネル信号を復号化する本発明の一実施形態によるマルチチャンネル復号化方法は、ダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、前記定義されたチャンネルのうち少なくとも一つを復号化するための個別情報を含む。 In order to solve the above problems, a multi-channel decoding method according to an embodiment of the present invention, in which a multi-channel signal having a defined channel is input and the input multi-channel signal is decoded, is a downmixed signal. And generating a signal to be input to the correlator based on the spatial information, inputting the generated signal to the correlator and performing a correlation, and using the spatial information, the downmixing is performed. Mixing the signal and the dicorilated signal, wherein the spatial information includes individual information for decoding at least one of the defined channels.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化方法は、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、左側チャンネルと右側チャンネルとの間のＣＬＤ（Ｃｈａｎｎｅｌ Ｌｅｖｅｌ Ｄｉｆｆｅｒｅｎｃｅ）またはＩＣＣ（Ｉｎｔｅｒ Ｃｈａｎｎｅｌ Ｃｏｒｒｅｌａｔｉｏｎ）を含む。 In order to solve the above-described problem, a multi-channel decoding method according to an embodiment of the present invention receives a signal downmixed from a multi-channel at a coding end and inputs a signal to a correlator using spatial information. Generating the signal, inputting the generated signal into a dicorylator, and performing dicorylation, and using the spatial information, mixing the downmixed signal and the dicorilated signal; The spatial information includes CLD (Channel Level Difference) or ICC (Inter Channel Correlation) between the left channel and the right channel.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化方法は、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、前記ダウンミックスされた信号を入力されて、左側チャンネル及び右側チャンネルにアップミキシングするモジュールで利用される空間情報を含む。 In order to solve the above-described problem, a multi-channel decoding method according to an embodiment of the present invention receives a signal downmixed from a multi-channel at a coding end and inputs a signal to a correlator using spatial information. Generating the signal, inputting the generated signal into a dicorylator, and performing a dichroic process, and using the spatial information, mixing the downmixed signal and the dicorilated signal; The spatial information includes spatial information used by a module that receives the downmixed signal and upmixes the left channel and the right channel.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化方法は、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、前記ダウンミックスされた信号を左側チャンネル及び右側チャンネルに優先してアップミキシングする空間情報を含む。 In order to solve the above-described problem, a multi-channel decoding method according to an embodiment of the present invention receives a signal downmixed from a multi-channel at a coding end and inputs a signal to a correlator using spatial information. Generating the signal, inputting the generated signal into a dicorylator, and performing a dichroic process, and using the spatial information, mixing the downmixed signal and the dicorilated signal; The spatial information includes spatial information for premixing the downmixed signal with priority over the left channel and the right channel.
前記課題を解決するために、前記方法は、コンピュータで実行されるコンピュータプログラムで具現されてコンピュータで読み取り可能な記録媒体に保存されうる。 In order to solve the above problem, the method may be implemented as a computer program executed on a computer and stored in a computer-readable recording medium.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化システムは、符号化端でマルチチャンネルからダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成する前マトリックス適用部と、前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、前記空間情報は、左側チャンネルと右側チャンネルとの間の情報を含む。 In order to solve the above problem, a multi-channel decoding system according to an embodiment of the present invention generates a signal to be input to a correlator based on spatial information using a signal downmixed from a multi-channel at an encoding end. A pre-matrix application unit, a dicorrelation unit that inputs each generated signal to a dicorrelator and performs a correlation, and the spatial information is used to combine the downmixed signal and the dicorrelated signal. A post-matrix application unit for mixing, and the spatial information includes information between the left channel and the right channel.
前記課題を解決するために、定義されたチャンネルからなるマルチチャンネル信号を入力され、入力されたマルチチャンネル信号を復号化する本発明の一実施形態によるマルチチャンネル復号化システムは、ダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成する前マトリックス適用部と、前記生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、前記空間情報は、前記定義されたチャンネルのうち少なくとも一つを復号化するための個別情報を含む。 In order to solve the above-mentioned problem, a multi-channel decoding system according to an embodiment of the present invention that receives a multi-channel signal including defined channels and decodes the input multi-channel signal is a down-mixed signal. And using the spatial information, a pre-matrix application unit that generates a signal to be input to the correlator based on spatial information, a dicorrelation unit that inputs the generated signal to the correlator and correlates, A post-matrix application unit for mixing the downmixed signal and the dichroic signal, and the spatial information includes individual information for decoding at least one of the defined channels. Including.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化システムは、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成する前マトリックス適用部と、前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、前記空間情報は、左側チャンネルと右側チャンネルとの間のＣＬＤまたはＩＣＣを含む。 In order to solve the above problems, a multi-channel decoding system according to an embodiment of the present invention receives a signal downmixed from a multi-channel at an encoding end and inputs a signal to a correlator using spatial information. A pre-matrix application unit for generating a signal, a dichroic unit for inputting each generated signal into a dicorillator and performing a dichroic operation, and using the spatial information, the downmixed signal and the dichroic signal And a post-matrix application unit for mixing, and the spatial information includes CLD or ICC between the left channel and the right channel.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化システムは、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成する前マトリックス適用部と、前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、前記空間情報は、前記ダウンミックスされた信号を入力されて、左側チャンネル及び右側チャンネルにアップミキシングするモジュールで利用される空間情報を含む。 In order to solve the above problems, a multi-channel decoding system according to an embodiment of the present invention receives a signal downmixed from a multi-channel at an encoding end and inputs a signal to a correlator using spatial information. A pre-matrix application unit for generating a signal, a dichroic unit for inputting each generated signal into a dicorillator and performing a dichroic operation, and using the spatial information, the downmixed signal and the dichroic signal And a post-matrix application unit, and the spatial information includes spatial information used by a module that receives the downmixed signal and upmixes the left channel and the right channel.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル復号化システムは、符号化端でマルチチャンネルからダウンミックスされた信号を入力されて、空間情報を利用してジコリレーターに入力する信号を生成するステップと、前記生成された信号をジコリレーターに入力してジコリレーションするステップと、前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、前記空間情報は、前記ダウンミックスされた信号を左側チャンネル及び右側チャンネルに優先してアップミキシングする空間情報を含む。 In order to solve the above problems, a multi-channel decoding system according to an embodiment of the present invention receives a signal downmixed from a multi-channel at an encoding end and inputs a signal to a correlator using spatial information. Generating the signal, inputting the generated signal into a dicorylator, and performing a dichroic process, and using the spatial information, mixing the downmixed signal and the dicorilated signal; The spatial information includes spatial information for premixing the downmixed signal with priority over the left channel and the right channel.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル符号化方法は、マルチチャンネル信号から左側チャンネル及び右側チャンネルを最後にダウンミキシングするステップと、前記ダウンミキシングされた信号の空間情報を抽出するステップと、前記ダウンミキシングされた信号及び前記抽出された空間情報を含むビットストリームを生成するステップと、を含む。 In order to solve the above-described problem, a multi-channel encoding method according to an embodiment of the present invention includes a step of finally down-mixing a left channel and a right channel from a multi-channel signal, and spatial information of the down-mixed signal. Extracting, and generating a bitstream including the downmixed signal and the extracted spatial information.
前記課題を解決するために、本発明の一実施形態によるマルチチャンネル符号化システムは、マルチチャンネル信号から左側チャンネル及び右側チャンネルを最後にダウンミキシングするダウンミキシング部と、前記ダウンミックスされた信号の空間情報を抽出する情報抽出部と、前記ダウンミックスされた信号及び前記抽出された空間情報を含むビットストリームを生成するビットストリーム生成部と、を備える。 In order to solve the above-described problem, a multi-channel encoding system according to an embodiment of the present invention includes a down-mixing unit that finally down-mixes a left channel and a right channel from a multi-channel signal, and a space of the down-mixed signal. An information extraction unit that extracts information; and a bitstream generation unit that generates a bitstream including the downmixed signal and the extracted spatial information.
以下、添付された図面を参照して、本発明によるマルチチャンネル復号化及び符号化方法及びシステムについて詳細に説明する。図面内の識別番号は、その識別番号が表す構成要素を指す。本発明を説明するための実施形態を、図面を参照して後述する。 Hereinafter, a multi-channel decoding and encoding method and system according to the present invention will be described in detail with reference to the accompanying drawings. An identification number in the drawing indicates a component represented by the identification number. An embodiment for explaining the present invention will be described later with reference to the drawings.
図２は、本発明によるマルチチャンネル復号化方法の一実施形態を示すフローチャートである。以下では、復号化過程は、図４に示したように、まず、入力されたダウンミックスされたＬ（Ｌｅｆｔ）チャンネル信号とＲ（Ｒｉｇｈｔ）チャンネル信号とをアップミックスし、次いで、Ｌ，Ｒ，Ｃチャンネル信号それぞれをアップミックスするための第１レベル／ステップＯＴＴ０（１−ｔｏ−２）モジュール及びＴＴＴ０（２−ｔｏ−３）モジュールのために述べられることである。かかる復号化過程と共に、入力されたダウンミックスされた信号の選択的なアップミキシング／復号化が可能である。 FIG. 2 is a flowchart illustrating an embodiment of a multi-channel decoding method according to the present invention. Hereinafter, as illustrated in FIG. 4, the decoding process first upmixes the input downmixed L (Left) channel signal and R (Right) channel signal, and then performs L, R, What will be described for the first level / step OTT 0 (1-to-2) module and the TTT 0 (2-to-3) module for upmixing each of the C channel signals. Along with such a decoding process, it is possible to selectively upmix / decode an input downmixed signal.
これにより、まず、符号化端から伝送されたサラウンドビットストリームを分析して、空間情報及び付加情報を抽出する（ステップ２００）。 Thus, first, the surround bit stream transmitted from the encoding end is analyzed to extract spatial information and additional information (step 200).
ステップ２００で抽出された空間情報を利用して、低ビット率で空間情報が急激に変化することを防止するために選択的に空間情報をスムージングする（ステップ２０３）。
Using the spatial information extracted in
ステップ２０３後に、既存のマトリックスサラウンド方式と互換性を維持するために、追加的なチャンネル別に利得値を計算し、プリベクトルを計算し、復号化端でエクスターナルダウンミックスを使用する場合、チャンネル別に利得値を補償するための変数を抽出することによって、行列Ｒ１を生成する（ステップ２０６）。ステップ２０６で生成された行列Ｒ１は、ジコリレーション部３４０に設けられたジコリレーターに入力するための信号を生成するのに使われる行列である。ステップ２０６で行列Ｒ１を生成するにおいて、空間情報を利用する。ここで、利用される空間情報は、ＬチャンネルとＲチャンネルとの間のＣＬＤまたはＩＣＣのようなＬチャンネルとＲチャンネルとの差に関する情報または連関に関する情報を含む。例えば、符号化端でダウンミックスされた信号をＬチャンネル及びＲチャンネルに入力して、図４の４００に設けられたＯＴＴ０モジュールで利用される空間情報をいう。Ｌチャンネル及びＲチャンネルが復号化されるときのみ、空間情報は、ＬチャンネルとＲチャンネルとの間の個別的なＣＬＤまたはＩＣＣのみを含む。
After
ステップ２０６では、図４のＴＴＴ０モジュールのモードによってＲ１を異なって生成する。例えば、ＴＴＴ０モジュールのモードを表す変数として、ＭＰＥＧサラウンドでは、次の表に示した関係を有するｂｓＴｔｔＭｏｄｅＬｏｗを利用する。
In
ｂｓＴｔｔＭｏｄｅＬｏｗ（０）が‘３’である場合、次の式（２）に記載された行列Ｒ１を生成する。
When bsTttModeLow (0) is “3”, the matrix R1 described in the following equation (2) is generated.
ジコリレーションされた信号とダイレクト信号とをミックスするのに使われる行列Ｒ２を、次に記載された式（４）を利用して生成する（ステップ２１０）。ステップ２１０で行列Ｒ２を生成するに当って、空間情報を利用する。ここで、利用される空間情報は、ＬチャンネルとＲチャンネルとの間のＣＬＤまたはＩＣＣのようなＬチャンネルとＲチャンネルとの差に関する情報または連関に関する情報を含む。例えば、符号化端でダウンミックスされた信号をＬチャンネル及びＲチャンネルに復号化してアップミキシングする図４の４００に設けられたＯＴＴ０モジュールで利用される空間情報をいう。
A matrix R2 used to mix the correlated signal and the direct signal is generated using Equation (4) described below (step 210). In generating the matrix R2 in
符号化端でマルチチャンネルからダウンミックスされた信号と元信号との差をＡＣＣで符号化して、レシデュアルコーディングされた信号を復号化する（ステップ２１６）。 The difference between the signal downmixed from the multi-channel at the encoding end and the original signal is encoded by ACC, and the signal subjected to the residual coding is decoded (step 216).
ステップ２１６で復号化されたＭＤＣＴ（Ｍｏｄｉｆｉｅｄ Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）係数をＱＭＦ（Ｑｕａｄｒａｔｕｒｅ Ｍｉｒｒｏｒ Ｆｉｌｔｅｒ）ドメインに変換する（ステップ２１８）。
The MDCT (Modified Discrete Cosine Transform) coefficient decoded in
ステップ２１８で出力された信号に対して、フレーム間のオーバーラップアドを行う（ステップ２２０）。 Overlap addition between frames is performed on the signal output at step 218 (step 220).
低周波帯域信号がＱＭＦフィルタバンクにより周波数分解能が不足するので、追加的なフィルタリングを通じて周波数分解能を高める（ステップ２２３）。 Since the frequency resolution of the low frequency band signal is insufficient due to the QMF filter bank, the frequency resolution is increased through additional filtering (step 223).
復号化端に設けられたチャンネルまたはスピーカの設定を認識する（ステップ２３０）。ここで、チャンネルまたはスピーカの設定は、復号化端に備えられたスピーカの個数、復号化端に備えられたスピーカのうち動作可能なスピーカの位置、符号化端で符号化されたチャンネルのうち、復号化端に設けられたマルチチャンネルで利用できるチャンネルの情報などをいう。例えば、入力されたダウンミックスされた信号の復号化をどのように選択的に決定するかにおいて、他の付加的な実施形態も同一に可能である。 The setting of the channel or speaker provided at the decoding end is recognized (step 230). Here, the setting of the channel or speaker is the number of speakers provided at the decoding end, the position of an operable speaker among the speakers provided at the decoding end, and the channel encoded at the encoding end, This refers to information on channels that can be used in the multi-channel provided at the decoding end. For example, other additional embodiments are equally possible in how to selectively determine the decoding of the input downmixed signal.
ステップ２３０で認識された設定を利用して、復号化するレベルの数を計算する（ステップ２３３）。 The number of levels to be decoded is calculated using the settings recognized in step 230 (step 233).
ＱＭＦハイブリッドアナリシスフィルタバンクを利用して、入力信号を周波数バンド別に分解する（ステップ２３６）。 The input signal is decomposed by frequency band using the QMF hybrid analysis filter bank (step 236).
行列Ｍ１を利用して、ダイレクト信号及びジコリレーターに入力する信号を生成する（ステップ２３８）。ステップ２３８では、ＯＴＴ０に対応してＬチャンネル及びＲチャンネルをジコリレーションするジコリレーターＤ０ ＯＴＴに入力する信号、ＴＴＴ０に対応してＬチャンネル、Ｒチャンネル及びＣチャンネルをジコリレーションするジコリレーターＤ０ ＴＴＴに入力する信号、ＯＴＴ２に対応してＦＬチャンネル及びＢＬチャンネルをジコリレーションするジコリレーターＤ２ ＯＴＴに入力する信号、ＦＲチャンネル及びＢＲチャンネルをジコリレーションするジコリレーターＤ３ ＯＴＴに入力する信号を生成する。また、ステップ２３８では、ステップ２３３で計算された復号化するレベルの数によって復号化するレベルの数を調節することによって、スケーラブルアップミキシングして復号化可能にする。
The matrix M1 is used to generate a direct signal and a signal to be input to the correlator (step 238). In
ステップ２３８で生成されたジコリレーターに入力する信号に対してジコリレーターでジコリレーションを行うことによって、空間感を有するように再構成する（ステップ２４０）。
The signal input to the dicorrelator generated in
ジコリレーターＤ０ ＯＴＴは、ＯＴＴ０に対応してＬチャンネル及びＲチャンネルをジコリレーションし、ジコリレーターＤ０ ＴＴＴは、ＴＴＴ０に対応してＬチャンネル、Ｒチャンネル及びＣタチャンネルをジコリレーションし、ジコリレーターＤ２ ＯＴＴは、ＯＴＴ２に対応してＦＲチャンネル及びＢＲチャンネルをジコリレーションし、ジコリレーターＤ３ ＯＴＴは、ＯＴＴ３に対応してＦＬチャンネル及びＢＬチャンネルをジコリレーションする。 The dicorilator D 0 OTT correlates the L channel and the R channel corresponding to OTT 0 , and the dicorilator D 0 TTT correlates the L channel, R channel, and C channel corresponding to TTT 0 , 2 OTT correlates the FR channel and BR channel corresponding to OTT 2 , and the dicorrelator D 3 OTT correlates the FL channel and BL channel corresponding to OTT 3 .
ステップ２４０でジコリレーションされた信号及びステップ２３８で生成されたダイレクト信号に対して、それぞれステップ２１３で生成された行列Ｍ２を適用する（ステップ２４３）。ここで、ステップ２４３では、ステップ２３３で計算された復号化するレベルの数によって復号化するレベルの数を調節することによって、スケーラブルアップミキシングして復号化可能にする。
The matrix M2 generated in
ステップ２４３で、行列Ｍ２が適用された信号にＴＥＳ（Ｔｅｍｐｏｒａｌ Ｅｎｖｅｌｏｐｅ Ｓｈａｐｉｎｇ）を適用する（ステップ２４６）。
In
ステップ２４６で、ＴＥＳが適用された信号にＱＭＦハイブリッド合成フィルタバンクを利用して時間ドメインに変換する（ステップ２４８）。
In
ステップ２４８で変換された信号にＴＰ（Ｔｅｍｐｏｒａｌ Ｐｒｏｃｅｓｓｉｎｇ）を適用する（ステップ２５０）。 TP (Temporal Processing) is applied to the signal converted in Step 248 (Step 250).
ここで、ステップ２４３及びステップ２５０は、アプローズのようにテンポラール構造が重要な信号の音質を向上させるためのものであって、選択的に利用でき、必須的に適用すべきものではない。
Here,
ダイレクト信号とジコリレーションされた信号とをミックスする（ステップ２５３）。 The direct signal and the dichroic signal are mixed (step 253).
図２では、５．１チャンネルについての一実施形態のみを示したが、当業者ならば、５．１チャンネルに限定して実施されないということが分かる。本発明によるマルチチャンネル復号化方法を、符号化端でダウンミックスされた信号を優先的にＬチャンネル及びＲチャンネルにアップミキシングするあらゆるマルチチャンネルに対して実施できる。 Although only one embodiment for 5.1 channels is shown in FIG. 2, those skilled in the art will recognize that the present invention is not limited to 5.1 channels. The multi-channel decoding method according to the present invention can be performed on any multi-channel that premixes a signal downmixed at the encoding end preferentially into the L channel and the R channel.
図３は、本発明によるマルチチャンネル復号化システムの一実施形態を示すブロック図である。 FIG. 3 is a block diagram illustrating an embodiment of a multi-channel decoding system according to the present invention.
ビットストリームデコーダ３００は、サラウンドビットストリームを分析して空間情報及び付加情報を抽出する。
The
スムージング部３０２は、低ビット率で空間情報が急激に変化することを防止するために選択的に空間情報をスムージングする。
The smoothing
マトリックスコンポーネント計算部３０４は、既存のマトリックスサラウンド方式と互換性を維持するために追加的なチャンネル別に利得値を計算する。
The
前ベクトル計算部３０６は、プリベクトルを計算する。
The previous
アービトラリーダウンミックス利得値抽出部３０８は、復号化器でエクスターナルダウンミックスを使用する場合、チャンネル別に利得値を補償するための変数を抽出する。
Arbitrary downmix gain
マトリックス生成部３１２は、マトリックスコンポーネント計算部３０４、前ベクトル計算部３０６及びアービトラリーダウンミックス利得値抽出部３０８で出力される結果を利用して行列Ｒ１を生成する。マトリックス生成部３１２で行列Ｒ１を生成するに当って、空間情報を利用する。ここで、利用される空間情報は、ＬチャンネルとＲチャンネルとの間のＣＬＤまたはＩＣＣのようなＬチャンネルとＲチャンネルとの差に関する情報または連関に関する情報を含む。例えば、符号化端でダウンミックスされた信号をＬチャンネル及びＲチャンネルに復号化してアップミキシングする図４の４００に設けられたＯＴＴ０モジュールで利用される空間情報をいう。
The
ここで、マトリックス生成部３１２は、図４のＴＴＴ０モジュールのモードによってＲ１を異なって生成する。例えば、ＴＴＴ０モジュールのモードを表す変数として、ＭＰＥＧサラウンドでは、前記表１に示した関係を有するｂｓＴｔｔＭｏｄｅＬｏｗを利用する。
Here, the
ここで、ｂｓＴｔｔＭｏｄｅＬｏｗ（０）が‘２’より小さい場合、前記式（１）に記載された行列Ｒ１を生成する。 Here, when bsTttModeLow (0) is smaller than ‘2’, the matrix R1 described in the equation (1) is generated.
ｂｓＴｔｔＭｏｄｅＬｏｗ（０）が‘３’である場合、前記式（２）に記載された行列Ｒ１を生成する。 When bsTttModeLow (0) is “3”, the matrix R1 described in the equation (2) is generated.
ｂｓＴｔｔＭｏｄｅＬｏｗ（０）が‘５’である場合、前記式（３）に記載された行列Ｒ１を生成する。 When bsTttModeLow (0) is “5”, the matrix R1 described in the equation (3) is generated.
したがって、補間処理部３１４は、マトリックス生成部３１２で生成された行列Ｒ１に対して補間を行って、行列Ｍ１を生成する。
Therefore, the
ミックスベクトル計算部３１０は、ジコリレーション部３４０でジコリレーションされた信号とダイレクト信号とをミックスするための行列Ｒ２を生成する。ミックスベクトル計算部３１０で行列Ｒ２を生成するに当って、空間情報を利用する。ここで、利用される空間情報は、ＬチャンネルとＲチャンネルとの間のＣＬＤまたはＩＣＣのようなＬチャンネルとＲチャンネルとの差に関する情報または連関に関する情報を含む。例えば、符号化端でダウンミックスされた信号をＬチャンネル及びＲチャンネルに復号化してアップミキシングする図４の４００に設けられたＯＴＴ０モジュールで利用される空間情報をいう。
The mix
ミックスベクトル計算部３１０は、前記式（４）に記載された行列Ｒ２を生成する。
The mix
したがって、補間処理部３１６は、ミックスベクトル計算部３１０で生成された行列Ｒ２に対して補間を行って、行列Ｍ２を生成する。
Therefore, the interpolation processing unit 316 performs interpolation on the matrix R2 generated by the mix
ＡＡＣデコーダ３２０は、符号化端でマルチチャンネルからダウンミックスされた信号と元信号との差をＡＣＣで符号化して、レシデュアルコーディングされた信号を復号化する。
The
ＭＤＣＴ変換部３２２は、ＡＡＣデコーダ３２０から出力されたＭＤＣＴ係数をＱＭＦドメインに変換し、ジコリレーション部３４０を代替してアップミキシングする。
The
オーバーラップアド部３２４は、ＭＤＣＴ変換部３２２から出力された信号に対してフレーム間のオーバーラップアドを行う。
The overlap add unit 324 performs overlap addition between frames on the signal output from the
ハイブリッド分析部３２６は、低周波帯域信号がＱＭＦフィルタバンクにより周波数分解能が不足するので、追加的なフィルタリングを通じて周波数分解能を高める。
The
復号化レベル計算部３２７は、復号化端に設けられたチャンネルまたはスピーカの設定を認識して復号化するレベルの数を計算する。ここで、復号化端のマルチチャンネルの設定は、復号化端に備えられたスピーカの個数、復号化端に備えられたスピーカのうち動作可能なスピーカの位置、符号化端で符号化されたチャンネルのうち、復号化端に設けられたマルチチャンネルで利用できるチャンネルの情報などをいう。
The decoding
復号化レベル制御部３２９は、復号化レベル計算部３２７で計算された復号化するレベルの数により復号化するように制御する信号を出力する。
The decoding
ハイブリッド分析部３３０は、ＱＭＦハイブリッドアナリシスフィルタバンクであって、入力信号を周波数バンド別に分解する。
The
前マトリックス適用部３３５は、行列Ｍ１を利用してダイレクト信号及びジコリレーターに入力する信号を生成する。ここで、前マトリックス適用部３３５は、ＯＴＴ０に対応してＬチャンネル及びＲチャンネルをジコリレーションするジコリレーターＤ０ ＯＴＴに入力する信号、ＴＴＴ０に対応してＬチャンネル、Ｒチャンネル及びＣチャンネルをジコリレーションするジコリレーターＤ０ ＴＴＴに入力する信号、ＯＴＴ２に対応してＦＲチャンネル及びＢＲチャンネルをジコリレーションするジコリレーターＤ２ ＯＴＴに入力する信号、ＦＬチャンネル及びＢＬチャンネルをジコリレーションするジコリレーターＤ３ ＯＴＴに入力する信号を生成する。また、前マトリックス適用部３３５は、復号化レベル制御部３２９から出力される制御信号に応答して復号化するレベルの数を調節することによって、スケーラブルアップミキシングして復号化可能にする。
The
ジコリレーション部３４０は、前マトリックス適用部３３５で生成された信号に対してジコリレーションを行うことによって、空間感を有するように再構成する。第０ジコリレーター３４２は、ＯＴＴ０に対応してＬチャンネル及びＲチャンネルをジコリレーションし、第１ジコリレーター３４４は、ＴＴＴ０に対応してＬチャンネル、Ｒチャンネル及びＣチャンネルに対してジコリレーションし、第２ジコリレーター３４６は、ＯＴＴ２に対応してＦＲチャンネル及びＢＲチャンネルをジコリレーションし、第３ジコリレーション部３４８は、ＯＴＴ３に対応してＦＬチャンネル及びＢＬチャンネルをジコリレーションする。
The
ミックスマトリックス適用部３５０は、ジコリレーション部３４０から出力された信号及び前マトリックス適用部３３５から出力されたダイレクト信号に対してそれぞれ行列Ｍ２を適用する。ここで、ミックスマトリックス適用部３５０は、復号化レベル制御部３２９から出力される制御信号に応答して復号化するレベルの数を調節することによって、スケーラブルアップミキシングして復号化可能にする。
The mix
ＴＥＳ適用部３３５は、ミックスマトリックス適用部３５０から出力された信号にＴＥＳを適用する。
The
ＱＭＦハイブリッド合成部３６０は、ＱＭＦハイブリッド合成フィルタバンクであって、時間ドメインに変換する。
The QMF
ＴＰ適用部３６５は、ＱＭＦハイブリッド合成部３６０から出力された信号にＴＰを適用する。
The
ここで、ＴＥＳ適用部３３５及びＴＰ適用部３６５は、アプローズのようにテンポラール構造が重要な信号の音質を向上させるためのものであって、選択的に利用でき、必須的に適用すべきものではない。
Here, the
ミキシング部３７０は、ダイレクト信号とジコリレーションされた信号とをミックスする。
The
図３では、５．１チャンネルについての一実施形態のみを示したが、当業者ならば、５．１チャンネルに限定して実施されないということが分かる。本発明によるマルチチャンネル復号化方法を、符号化端でダウンミックスされた信号を優先的にＬチャンネル及びＲチャンネルにアップミキシングするあらゆるマルチチャンネルに対して実施できる。 Although only one embodiment for 5.1 channels is shown in FIG. 3, those skilled in the art will recognize that the present invention is not limited to 5.1 channels. The multi-channel decoding method according to the present invention can be performed on any multi-channel that premixes a signal downmixed at the encoding end preferentially into the L channel and the R channel.
図４は、本発明によるマルチチャンネル復号化方法及びシステムで適用する５−１−５の３ツリー構造を示す概念図である。ここで、図４は、本発明によるマルチチャンネル復号化方法及びシステムで復号化してアップミキシングする順序を、ＯＴＴモジュールとＴＴＴモジュールとを利用して概念的に示す。 FIG. 4 is a conceptual diagram illustrating a 3-tree structure of 5-1-5 applied in the multi-channel decoding method and system according to the present invention. Here, FIG. 4 conceptually shows the order of decoding and upmixing by the multi-channel decoding method and system according to the present invention using the OTT module and the TTT module.
ＯＴＴ０モジュール４００は、符号化器でダウンミックスされたモノ信号を入力されて、Ｌ信号及びＲ信号に復号化してアップミキシングする。ここで、Ｌ信号及びＲ信号の最初のアップミキシングは、図１Ａ及び図１Ｂに示した前記５−１−５ツリー構造と本質的に異なる。その最初のステップＯＴＴモジュールの出力は、Ｌチャンネル信号及びＲチャンネル信号を適切に再生するのに使われないが、付加的なステップが最初のステップＯＴＴモジュールのような出力をさらにアップミックスするために必要である。 The OTT 0 module 400 receives a mono signal downmixed by an encoder, decodes it into an L signal and an R signal, and upmixes the mono signal. Here, the initial upmixing of the L and R signals is essentially different from the 5-1-5 tree structure shown in FIGS. 1A and 1B. The output of the first step OTT module is not used to properly reproduce the L channel signal and the R channel signal, but additional steps are required to further upmix the output as the first step OTT module. is necessary.
したがって、そのＯＴＴ０モジュール以後、そのＴＴＴ０モジュール４１０は、ＯＴＴ０モジュール４００から出力されたＬ信号及びＲ信号を入力されて、Ｌ信号、Ｒ信号及びＣ信号に復号化してアップミキシングする。 Therefore, after the OTT 0 module, the TTT 0 module 410 receives the L signal and the R signal output from the OTT 0 module 400, decodes them into an L signal, an R signal, and a C signal and upmixes them.
ＯＴＴ１モジュール４２０は、ＴＴＴ０モジュール４１０から出力されたセンタ信号を入力されて、Ｃ信号及びＬＥＦ信号に復号化してアップミキシングする。 The OTT 1 module 420 receives the center signal output from the TTT 0 module 410, decodes it into a C signal and a LEF signal, and performs upmixing.
ＯＴＴ２モジュール４３０は、ＴＴＴ０モジュール４１０から出力されたＬ信号を入力されて、ＦＬ信号及びＢＬ信号に復号化してアップミキシングする。 The OTT 2 module 430 receives the L signal output from the TTT 0 module 410, decodes it into the FL signal and the BL signal, and upmixes them.
ＯＴＴ３モジュール４４０は、ＴＴＴ０モジュール４１０から出力されたＲ信号を入力されて、ＦＲ信号及びＢＲ信号に復号化してアップミキシングする。 The OTT 3 module 440 receives the R signal output from the TTT 0 module 410, decodes it into an FR signal and a BR signal, and performs upmixing.
図５は、本発明によるマルチチャンネル復号化方法及びシステムで入力される信号と出力される信号との数学的関係を示す概念図である。 FIG. 5 is a conceptual diagram showing a mathematical relationship between an input signal and an output signal in the multi-channel decoding method and system according to the present invention.
前ジコリレーターマトリックスＭ１は、ＣＬＤ及びＩＣＣを利用することによって、符号化器でダウンミックスされたモノ信号Ｘｍを入力として、ダイレクト信号ｍとジコリレーターＤ０ ＯＴＴ，Ｄ０ ＴＴＴ，Ｄ２ ＯＴＴ及びＤ３ ＯＴＴに入力する信号とを出力する。 The pre-dicorilator matrix M1 uses the CLD and ICC to input the mono signal Xm downmixed by the encoder, and receives the direct signal m and the dicorrelators D 0 OTT , D 0 TTT , D 2 OTT and D 3 The signal input to the OTT is output.
ジコリレーターＤ０ ＯＴＴ，Ｄ０ ＴＴＴ，Ｄ２ ＯＴＴ及びＤ３ ＯＴＴは、Ｍ１から計算された信号をジコリレーションする。 The dicorrelators D 0 OTT , D 0 TTT , D 2 OTT and D 3 OTT dicorrelate the signal calculated from M1.
ミックスマトリックスＭ２は、ＣＬＤ及びＩＣＣを利用することによって、ダイレクト信号ｍとジコリレーションされた信号ｄ０，ｄ１，ｄ２，ｄ３とをミックスしてアップミキシングする。ここで、ミックスマトリックスＭ２は、ダイレクト信号ｍとジコリレーションされた信号ｄ０，ｄ１，ｄ２，ｄ３とを入力として、ＦＬ信号、ＢＬ信号、ＦＲ信号、ＢＲ信号、Ｃ信号及びＬＥＦ信号を出力する。 The mix matrix M2 mixes and upmixes the direct signal m and the correlated signals d0, d1, d2, and d3 by using CLD and ICC. Here, the mix matrix M2 receives the direct signal m and the correlated signals d0, d1, d2, and d3, and outputs the FL signal, the BL signal, the FR signal, the BR signal, the C signal, and the LEF signal.
図６は、本発明によるマルチチャンネル符号化方法の一実施形態を示すフローチャートである。 FIG. 6 is a flowchart illustrating an embodiment of a multi-channel encoding method according to the present invention.
まず、マルチチャンネルからダウンミキシングする（ステップ６００）。例えば、５．１チャンネルにおいて、マルチチャンネルは、ＦＬチャンネル、サラウンドＬチャンネル、ＦＲチャンネル、サラウンドＲチャンネル、Ｃチャンネル及びウーハーチャンネルから構成される。 First, downmixing is performed from multi-channel (step 600). For example, in 5.1 channel, the multi-channel is composed of FL channel, surround L channel, FR channel, surround R channel, C channel and woofer channel.
ステップ６００でダウンミキシングにおいて、Ｌチャンネル及びＲチャンネルを最後にダウンミキシングする。例えば、５．１チャンネルでは、ＦＬチャンネル、サラウンドＬチャンネル、ＦＲチャンネル、サラウンドＲチャンネル、Ｃチャンネル及びウーハーチャンネルをＬチャンネル、Ｒチャンネル及びＣチャンネルにダウンミキシングし、ダウンミキシングされた三つのチャンネルをＬチャンネル及びＲチャンネルにダウンミキシングする。
In
ステップ６００でダウンミキシングしたマルチチャンネルの空間情報を抽出する（ステップ６１０）。例えば、５．１チャンネルで抽出する空間情報は、ＬチャンネルとＲチャンネル、ＬチャンネルとＲチャンネルとＣチャンネル、ＦＬチャンネルとＢＬチャンネル、ＦＲチャンネルとＢＲチャンネル、Ｃタチャンネルとウーハーチャンネルに対してそれぞれアップミキシングするのに使われる情報を含む。
The multi-channel spatial information downmixed in
ステップ６００でダウンミキシングされた信号及びステップ６１０で抽出された空間情報を含むビットストリームを生成する（ステップ６２０）。
A bit stream including the signal downmixed in
図７は、本発明によるマルチチャンネル符号化システムの一実施形態を示すブロック図であって、マルチチャンネル符号化システムは、ダウンミキシング部７００、情報抽出部７１０及びビットストリーム生成部７２０を備える。
FIG. 7 is a block diagram illustrating an embodiment of a multi-channel encoding system according to the present invention. The multi-channel encoding system includes a
ダウンミキシング部７００は、入力端子ＩＮ ０ないしＩＮ Ｍに該当するマルチチャンネルからダウンミキシングする。例えば、５．１チャンネルにおいて、マルチチャンネルは、ＦＬチャンネル、サラウンドＬチャンネル、ＦＲチャンネル、サラウンドＲチャンネル、Ｃチャンネル及びウーハーチャンネルから構成される。
The
ここで、ダウンミキシング部７００は、Ｌチャンネル及びＲチャンネルを最後にダウンミキシングする。例えば、５．１チャンネルでは、ＦＬチャンネル、サラウンドＬチャンネル、ＦＲチャンネル、サラウンドＲチャンネル、Ｃチャンネル及びウーハーチャンネルをＬチャンネル、Ｒチャンネル及びＣチャンネルにダウンミキシングし、ダウンミキシングされた三つのチャンネルをＬチャンネル及びＲチャンネルにダウンミキシングする。
Here, the
情報抽出部７１０は、ダウンミキシング部７００でダウンミキシングしたマルチチャンネルの空間情報を抽出する。例えば、５．１チャンネルにおいて、ダウンミキシング部７００で抽出する空間情報は、ＬチャンネルとＲチャンネル、ＬチャンネルとＲチャンネルとＣチャンネル、ＦＬチャンネルとＢＬチャンネル、ＦＲチャンネルとＢＲチャンネル、Ｃチャンネルとウーハーチャンネルに対してそれぞれアップミキシングするのに使われる情報を含む。
The
ビットストリーム生成部７２０は、ダウンミキシング部７００でダウンミキシングされた信号及び情報抽出部７１０で抽出された空間情報を含むビットストリームを生成して、出力端子ＯＵＴを通じて復号化器に出力する。
The
本発明によるマルチチャンネル復号化及び符号化方法及びシステムによれば、ＬチャンネルとＲチャンネルとを最後にダウンミキシングして符号化し、ＬチャンネルとＲチャンネルとを優先的にアップミキシングして復号化する。 According to the multi-channel decoding and encoding method and system according to the present invention, the L channel and the R channel are finally downmixed and encoded, and the L channel and the R channel are preferentially upmixed and decoded. .
これにより、スケーラブルチャンネル復号化でも、ＬチャンネルとＲチャンネルの音質が低下せずに高音質で出力できる効果を奏する。 Thereby, even in scalable channel decoding, there is an effect that the sound quality of the L channel and the R channel can be output with high sound quality without deteriorating.
また、電力消費を低減し、ステレオにおいて高音質を要求するモバイルアプリケーションでも容易に利用できる効果を奏する。 In addition, the power consumption is reduced and the mobile application that requires high sound quality in stereo can be easily used.
前記実施形態以外にも、本発明の実施形態は、その実施形態を具現するための少なくとも一つのプロセッシングエレメントを制御するためのコード／インストラクションを保存した記録媒体、例えばコンピュータで読み取り可能な記録媒体として具現される。その記録媒体は、コンピュータで読み取り可能なコードの保存及び／または伝送を許容するミディアム／メディアに対応する。 In addition to the above embodiment, the embodiment of the present invention is a recording medium storing codes / instructions for controlling at least one processing element for implementing the embodiment, for example, a computer-readable recording medium. Embodied. The recording medium corresponds to a medium / media that allows storage and / or transmission of computer readable codes.
コンピュータで読み取り可能なコードは、多様なミディアム、例えば磁気記録媒体（例えば、ＲＯＭ、フロッピー（登録商標）ディスク、ハードディスク）、光学的な記録媒体（例えば、ＣＤ−ＲＯＭ、ＤＶＤ）及びキャリアウェーブのような保存／伝送媒体を含むミディアムの多様な例に保存／伝送される。ここで、ミディアムは、本発明の実施形態による信号（例えば、結果信号、ビットストリーム）でありうる。媒体は、コンピュータで読み取り可能なコードが分散された方法で保存／伝送及び実行されるように、分散されたネットワークでありうる。さらに、プロセッシングエレメントは、プロセッサまたはコンピュータプロセッサを含み、単一デバイスに含まれるか、または分配される。 Computer readable codes include a variety of mediums such as magnetic recording media (eg ROM, floppy disk, hard disk), optical recording media (eg CD-ROM, DVD) and carrier waves. Various examples of medium including various storage / transmission media are stored / transmitted. Here, the medium may be a signal (eg, a result signal, a bit stream) according to an embodiment of the present invention. The medium may be a distributed network such that computer readable code is stored / transmitted and executed in a distributed manner. Further, the processing element includes a processor or computer processor and is included or distributed in a single device.
以上、本発明の幾つかの実施形態が記載されたが、前記明細書に記載された本発明の内容は、特許請求の範囲に記載された思想とその均等な思想の範囲を逸脱しない範囲内で当業者により多様に変形される。 Although several embodiments of the present invention have been described above, the contents of the present invention described in the above specification are within the scope of the idea described in the claims and the scope of equivalent ideas thereof. Various modifications may be made by those skilled in the art.
Claims (58)
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、左側チャンネルと右側チャンネルとの間の情報を含むことを特徴とするマルチチャンネル復号化方法。 Generating a signal to be input to the correlator based on spatial information using a signal downmixed from the multi-channel at the encoding end;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding method, wherein the spatial information includes information between a left channel and a right channel.
前記ジコリレーションするステップは、前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項１に記載のマルチチャンネル復号化方法。 The generating step generates a signal to be correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front left channel and the rear left channel, respectively.
In the step of performing the decorrelation, the signal to be subjected to the decorrelation is correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively. The multi-channel decoding method according to claim 1, wherein:
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項１に記載のマルチチャンネル復号化方法。 The generating step, the correlating step, and the mixing step include:
The multi-channel decoding method according to claim 1, wherein the multi-channel decoding method is performed according to a mode of a module for up-mixing the left channel and the right channel into a left channel, a right channel, and a center channel.
前記計算された復号化するレベルの数によって、前記生成するステップ、前記ジコリレーションするステップ及び前記ミキシングするステップを制御するステップと、をさらに含むことを特徴とする請求項１に記載のマルチチャンネル復号化方法。 Calculating the number of levels to decode for each multi-channel signal according to the multi-channel setting at the decoding end;
The multi-channel decoding according to claim 1, further comprising controlling the generating step, the correlating step, and the mixing step according to the calculated number of decoding levels. Method.
ダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成するステップと、
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記定義されたチャンネルのうち少なくとも一つを復号化するための個別情報を含むことを特徴とするマルチチャンネル復号化方法。 In a multi-channel decoding method for inputting a multi-channel signal composed of defined channels and decoding the input multi-channel signal,
Using the downmixed signal to generate a signal to be input to the correlator based on the spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding method, wherein the spatial information includes individual information for decoding at least one of the defined channels.
前記ジコリレーションするステップは、前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項６に記載のマルチチャンネル復号化方法。 The generating step generates a signal to be correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front left channel and the rear left channel, respectively.
In the step of performing the decorrelation, the signal to be subjected to the decorrelation is correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively. The multi-channel decoding method according to claim 6.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項６に記載のマルチチャンネル復号化方法。 The generating step, the correlating step, and the mixing step include:
7. The multi-channel decoding method according to claim 6, wherein the multi-channel decoding method is performed differently depending on a mode of a module for up-mixing the left channel and the right channel into the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記生成するステップ、前記ジコリレーションするステップ及び前記ミキシングするステップを制御するステップと、をさらに含むことを特徴とする請求項６に記載のマルチチャンネル復号化方法。 Calculating the number of levels to decode for each multi-channel signal according to the multi-channel setting at the decoding end;
The multi-channel decoding according to claim 6, further comprising controlling the generating step, the correlating step and the mixing step according to the calculated number of decoding levels. Method.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、左側チャンネルと右側チャンネルとの間のＣＬＤ（Ｃｈａｎｎｅｌ Ｌｅｖｅｌ Ｄｉｆｆｅｒｅｎｃｅ）またはＩＣＣ（Ｉｎｔｅｒ Ｃｈａｎｎｅｌ Ｃｏｒｒｅｌａｔｉｏｎ）を含むことを特徴とするマルチチャンネル復号化方法。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding method, wherein the spatial information includes CLD (Channel Level Difference) or ICC (Inter Channel Correlation) between the left channel and the right channel.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方左側チャンネルと後方左側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーションするステップは、前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項１１に記載のマルチチャンネル復号化方法。 The generating step includes
Generates signals that correlate to the left and right channels, left and right channels and center channel, front left and rear left channels, front left and rear left channels, respectively.
In the step of performing the decorrelation, the signal to be subjected to the decorrelation is correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively. The multi-channel decoding method according to claim 11.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項１１に記載のマルチチャンネル復号化方法。 The generating step, the correlating step, and the mixing step include:
12. The multi-channel decoding method according to claim 11, wherein the multi-channel decoding method is performed according to a mode of a module for up-mixing the left channel and the right channel into a left channel, a right channel, and a center channel.
前記計算された復号化するレベルの数によって、前記生成するステップ、前記ジコリレーションするステップ及び前記ミキシングするステップを制御するステップと、をさらに含むことを特徴とする請求項１１に記載のマルチチャンネル復号化方法。 Calculating the number of levels to decode for each multi-channel signal according to the multi-channel setting at the decoding end;
12. The multi-channel decoding according to claim 11, further comprising controlling the generating step, the correlating step and the mixing step according to the calculated number of decoding levels. Method.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記ダウンミックスされた信号を入力されて、左側チャンネル及び右側チャンネルにアップミキシングするモジュールで利用される空間情報を含むことを特徴とするマルチチャンネル復号化方法。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding method according to claim 1, wherein the spatial information includes spatial information used by a module that receives the downmixed signal and upmixes the left channel and the right channel.
前記ジコリレーションするステップは、前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項１６に記載のマルチチャンネル復号化方法。 The generating step generates a signal to be correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively.
In the step of performing the decorrelation, the signal to be subjected to the decorrelation is correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively. The multi-channel decoding method according to claim 16, wherein:
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項１６に記載のマルチチャンネル復号化方法。 The generating step, the correlating step, and the mixing step include:
17. The multi-channel decoding method according to claim 16, wherein the multi-channel decoding method is performed according to a mode of a module for up-mixing the left channel and the right channel into the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記生成するステップ、前記ジコリレーションするステップ及び前記ミキシングするステップを制御するステップと、をさらに含むことを特徴とする請求項１６に記載のマルチチャンネル復号化方法。 Calculating the number of levels to decode for each multi-channel signal according to the multi-channel setting at the decoding end;
The multi-channel decoding according to claim 16, further comprising: controlling the generating step, the correlating step and the mixing step according to the calculated number of decoding levels. Method.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記ダウンミックスされた信号を左側チャンネル及び右側チャンネルに優先してアップミキシングする空間情報を含むことを特徴とするマルチチャンネル復号化方法。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding method according to claim 1, wherein the spatial information includes spatial information for premixing the downmixed signal with priority over a left channel and a right channel.
前記ジコリレーションするステップは、前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項２１に記載のマルチチャンネル復号化方法。 The generating step generates a signal to be correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively.
In the step of performing the decorrelation, the signal to be subjected to the decorrelation is correlated with the left channel and the right channel, the left channel and the right channel and the center channel, the front left channel and the rear left channel, and the front right channel and the rear right channel, respectively. The multi-channel decoding method according to claim 21, wherein:
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項２１に記載のマルチチャンネル復号化方法。 The generating step, the correlating step, and the mixing step include:
The multi-channel decoding method according to claim 21, wherein the multi-channel decoding method is performed according to a mode of a module for up-mixing the left channel and the right channel into a left channel, a right channel, and a center channel.
前記計算された復号化するレベルの数によって、前記生成するステップ、前記ジコリレーションするステップ及び前記ミキシングするステップを制御するステップと、をさらに含むことを特徴とする請求項２１に記載のマルチチャンネル復号化方法。 Calculating the number of levels to decode for each multi-channel signal according to the multi-channel setting at the decoding end;
The multi-channel decoding according to claim 21, further comprising: controlling the generating step, the correlating step, and the mixing step according to the calculated number of decoding levels. Method.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、左側チャンネルと右側チャンネルとの間の情報を含むことを特徴とする発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The spatial information includes information between a left channel and a right channel, and is a computer readable recording medium having recorded thereon a program for causing the computer to execute the invention.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、左側チャンネルと右側チャンネルとの間のＣＬＤまたはＩＣＣを含むことを特徴とする発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The spatial information includes a CLD or an ICC between the left channel and the right channel. A computer-readable recording medium storing a program for causing the computer to execute the invention.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記ダウンミックスされた信号を入力されて、左側チャンネル及び右側チャンネルにアップミキシングするモジュールで利用される空間情報を含むことを特徴とする発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The spatial information includes the spatial information used by a module that receives the downmixed signal and upmixes the left channel and the right channel, and records the program for causing the computer to execute the invention A computer-readable recording medium.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記ダウンミックスされた信号を左側チャンネル及び右側チャンネルに優先してアップミキシングする空間情報を含むことを特徴とする発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The spatial information includes spatial information that premixes the downmixed signal with priority over the left channel and the right channel, and is readable by a computer recording a program for causing the computer to execute the invention. recoding media.
前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、
前記空間情報は、左側チャンネルと右側チャンネルとの間の情報を含むことを特徴とするマルチチャンネル復号化システム。 A pre-matrix application unit that generates a signal to be input to the correlator based on spatial information using a signal downmixed from the multi-channel at the encoding end;
A dicorylation unit that inputs each generated signal to a dicorillator and performs dichroic correlation;
A post-matrix application unit that mixes the downmixed signal and the dichroic signal using the spatial information, and
The multi-channel decoding system according to claim 1, wherein the spatial information includes information between a left channel and a right channel.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーターは、
前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項３１に記載のマルチチャンネル復号化システム。 The pre-matrix application unit is
Generates signals that correlate with the left channel and right channel, left channel and right channel and center channel, front left channel and rear left channel, front right channel and rear right channel, respectively.
The dicorilator is
The dichroic signal is dicorrated to a left channel and a right channel, a left channel and a right channel and a center channel, a front left channel and a rear left channel, and a front right channel and a rear right channel, respectively. 32. The multi-channel decoding system according to 31.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項３１に記載のマルチチャンネル復号化システム。 The front matrix application unit and the rear matrix application unit are:
32. The multi-channel decoding system according to claim 31, wherein the multi-channel decoding system is performed according to a mode of a module for up-mixing the left channel and the right channel into the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記前マトリックス適用部及び前記後マトリックス適用部を制御する復号化レベル制御部と、を備えることを特徴とする請求項３１に記載のマルチチャンネル復号化システム。 A decoding level calculator for calculating the number of levels to be decoded for each multi-channel signal according to the channel or speaker setting;
32. The multi-channel decoding of claim 31, further comprising: a decoding level controller that controls the front matrix applying unit and the rear matrix applying unit according to the calculated number of decoding levels. system.
ダウンミックスされた信号を利用し、空間情報に基づいてジコリレーターに入力する信号を生成する前マトリックス適用部と、
前記生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、
前記空間情報は、前記定義されたチャンネルのうち少なくとも一つを復号化するための個別情報を含むことを特徴とするマルチチャンネル復号化システム。 In a multi-channel decoding system that receives a multi-channel signal composed of defined channels and decodes the input multi-channel signal,
A pre-matrix application unit that uses a downmixed signal to generate a signal to be input to the correlator based on spatial information;
A dicorylation unit that inputs the generated signal to a dicorillator and performs dicorylation;
A post-matrix application unit that mixes the downmixed signal and the dichroic signal using the spatial information, and
The multi-channel decoding system according to claim 1, wherein the spatial information includes individual information for decoding at least one of the defined channels.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーターは、
前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項３６に記載のマルチチャンネル復号化システム。 The pre-matrix application unit is
Generates signals that correlate with the left channel and right channel, left channel and right channel and center channel, front left channel and rear left channel, front right channel and rear right channel, respectively.
The dicorilator is
The dichroic signal is dicorrated to a left channel and a right channel, a left channel and a right channel and a center channel, a front left channel and a rear left channel, and a front right channel and a rear right channel, respectively. 36. The multi-channel decoding system according to 36.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項３６に記載のマルチチャンネル復号化システム。 The front matrix application unit and the rear matrix application unit are:
The multi-channel decoding system according to claim 36, wherein the left channel and the right channel are performed differently depending on a mode of a module for up-mixing the left channel and the right channel into the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記前マトリックス適用部及び前記後マトリックス適用部を制御する復号化レベル制御部と、を備えることを特徴とする請求項３６に記載のマルチチャンネル復号化システム。 A decoding level calculator for calculating the number of levels to be decoded for each multi-channel signal according to the channel or speaker setting;
The multi-channel decoding according to claim 36, further comprising: a decoding level control unit that controls the front matrix applying unit and the rear matrix applying unit according to the calculated number of decoding levels. system.
前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、
前記空間情報は、左側チャンネルと右側チャンネルとの間のＣＬＤまたはＩＣＣを含むことを特徴とするマルチチャンネル復号化システム。 A pre-matrix application unit that receives a signal downmixed from the multichannel at the encoding end and generates a signal to be input to the correlator using spatial information;
A dicorylation unit that inputs each generated signal to a dicorillator and performs dichroic correlation;
A post-matrix application unit that mixes the downmixed signal and the dichroic signal using the spatial information, and
The multi-channel decoding system according to claim 1, wherein the spatial information includes CLD or ICC between the left channel and the right channel.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーターは、
前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項４１に記載のマルチチャンネル復号化システム。 The pre-matrix application unit is
Generates signals that correlate with the left channel and right channel, left channel and right channel and center channel, front left channel and rear left channel, front right channel and rear right channel, respectively.
The dicorilator is
The dichroic signal is dicorrated to a left channel and a right channel, a left channel and a right channel and a center channel, a front left channel and a rear left channel, and a front right channel and a rear right channel, respectively. 42. The multi-channel decoding system according to 41.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項４１に記載のマルチチャンネル復号化システム。 The front matrix application unit and the rear matrix application unit are:
The multi-channel decoding system according to claim 41, wherein the left channel and the right channel are performed differently depending on a mode of a module for upmixing the left channel and the right channel into the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記前マトリックス適用部及び前記後マトリックス適用部を制御する復号化レベル制御部と、を備えることを特徴とする請求項４１に記載のマルチチャンネル復号化システム。 A decoding level calculator for calculating the number of levels to be decoded for each multi-channel signal according to the channel or speaker setting;
The multi-channel decoding according to claim 41, further comprising: a decoding level controller that controls the front matrix applying unit and the rear matrix applying unit according to the calculated number of decoding levels. system.
前記各生成された信号をジコリレーターに入力してジコリレーションするジコリレーション部と、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングする後マトリックス適用部と、を備え、
前記空間情報は、前記ダウンミックスされた信号を入力されて左側チャンネル及び右側チャンネルにアップミキシングするモジュールで利用される空間情報を含むことを特徴とするマルチチャンネル復号化システム。 A pre-matrix application unit that receives a signal downmixed from the multichannel at the encoding end and generates a signal to be input to the correlator using spatial information;
A dicorylation unit that inputs each generated signal to a dicorillator and performs dichroic correlation;
A post-matrix application unit that mixes the downmixed signal and the dichroic signal using the spatial information, and
The multi-channel decoding system according to claim 1, wherein the spatial information includes spatial information used by a module that receives the downmixed signal and upmixes the left channel and the right channel.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーターは、
前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項４６に記載のマルチチャンネル復号化システム。 The pre-matrix application unit is
Generates signals that correlate with the left channel and right channel, left channel and right channel and center channel, front left channel and rear left channel, front right channel and rear right channel, respectively.
The dicorilator is
The dichroic signal is dicorrated to a left channel and a right channel, a left channel and a right channel and a center channel, a front left channel and a rear left channel, and a front right channel and a rear right channel, respectively. 46. The multi-channel decoding system according to 46.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項４６に記載のマルチチャンネル復号化システム。 The front matrix application unit and the rear matrix application unit are:
47. The multi-channel decoding system according to claim 46, wherein the left channel and the right channel are performed differently depending on a mode of a module for upmixing the left channel, the right channel, and the center channel.
前記計算された復号化するレベルの数によって、前記前マトリックス適用部及び前記後マトリックス適用部を制御する復号化レベル制御部と、を備えることを特徴とする請求項４６に記載のマルチチャンネル復号化システム。 A decoding level calculator for calculating the number of levels to be decoded for each multi-channel signal according to the channel or speaker setting;
The multi-channel decoding according to claim 46, further comprising: a decoding level controller that controls the front matrix applying unit and the rear matrix applying unit according to the calculated number of decoding levels. system.
前記生成された信号をジコリレーターに入力してジコリレーションするステップと、
前記空間情報を利用して、前記ダウンミックスされた信号と前記ジコリレーションされた信号とをミキシングするステップと、を含み、
前記空間情報は、前記ダウンミックスされた信号を左側チャンネル及び右側チャンネルに優先してアップミキシングする空間情報を含むことを特徴とするマルチチャンネル復号化システム。 Receiving a signal downmixed from the multi-channel at the encoding end, and generating a signal to be input to the correlator using spatial information;
Inputting the generated signal into a dicorillator and performing diccoration;
Using the spatial information to mix the downmixed signal and the symcorrelated signal;
The multi-channel decoding system according to claim 1, wherein the spatial information includes spatial information for premixing the downmixed signal with priority on a left channel and a right channel.
左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションする信号を生成し、
前記ジコリレーターは、
前記ジコリレーションする信号を左側チャンネルと右側チャンネル、左側チャンネルと右側チャンネルとセンタチャンネル、前方左側チャンネルと後方左側チャンネル、前方右側チャンネルと後方右側チャンネルに対してそれぞれジコリレーションすることを特徴とする請求項５１に記載のマルチチャンネル復号化システム。 The pre-matrix application unit is
Generates signals that correlate with the left channel and right channel, left channel and right channel and center channel, front left channel and rear left channel, front right channel and rear right channel, respectively.
The dicorilator is
The dichroic signal is dicorrated to a left channel and a right channel, a left channel and a right channel and a center channel, a front left channel and a rear left channel, and a front right channel and a rear right channel, respectively. 51. The multi-channel decoding system according to 51.
左側チャンネル及び右側チャンネルを左側チャンネル、右側チャンネル及びセンタチャンネルにアップミキシングするモジュールのモードによって異なって行うことを特徴とする請求項５１に記載のマルチチャンネル復号化システム。 The front matrix application unit and the rear matrix application unit are:
52. The multi-channel decoding system according to claim 51, wherein the left channel and the right channel are performed differently depending on a mode of a module for up-mixing the left channel and the right channel into a left channel, a right channel, and a center channel.
前記計算された復号化するレベルの数によって、前記前マトリックス適用部及び前記後マトリックス適用部を制御する復号化レベル制御部と、を備えることを特徴とする請求項５１に記載のマルチチャンネル復号化システム。 A decoding level calculator for calculating the number of levels to be decoded for each multi-channel signal according to the channel or speaker setting;
52. The multi-channel decoding of claim 51, further comprising: a decoding level controller that controls the front matrix applying unit and the rear matrix applying unit according to the calculated number of decoding levels. system.
前記ダウンミキシングされた信号の空間情報を抽出するステップと、
前記ダウンミキシングされた信号及び前記抽出された空間情報を含むビットストリームを生成するステップと、を含むことを特徴とするマルチチャンネル符号化方法。 Finally downmixing the left and right channels from the multi-channel signal;
Extracting spatial information of the downmixed signal;
Generating a bitstream including the downmixed signal and the extracted spatial information. A multi-channel encoding method comprising:
前記ダウンミキシングされた信号の空間情報を抽出するステップと、
前記ダウンミキシングされた信号及び前記抽出された空間情報を含むビットストリームを生成するステップと、をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。 Finally downmixing the left and right channels from the multi-channel signal;
Extracting spatial information of the downmixed signal;
A computer-readable recording medium storing a program for causing a computer to execute the step of generating a bitstream including the downmixed signal and the extracted spatial information.
前記ダウンミックスされた信号の空間情報を抽出する情報抽出部と、
前記ダウンミックスされた信号及び前記抽出された空間情報を含むビットストリームを生成するビットストリーム生成部と、を備えることを特徴とするマルチチャンネル符号化システム。 A downmixing unit that downmixes the left channel and the right channel from the multichannel signal last,
An information extraction unit for extracting spatial information of the downmixed signal;
A multi-channel encoding system comprising: a bit stream generation unit that generates a bit stream including the downmixed signal and the extracted spatial information.
Applications Claiming Priority (11)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US75785706P | 2006-01-11 | 2006-01-11 | |
| US60/757,857 | 2006-01-11 | ||
| US75898506P | 2006-01-17 | 2006-01-17 | |
| US60/758,985 | 2006-01-17 | ||
| US75954306P | 2006-01-18 | 2006-01-18 | |
| US60/759,543 | 2006-01-18 | ||
| US78261606P | 2006-03-16 | 2006-03-16 | |
| US60/782,616 | 2006-03-16 | ||
| KR1020060049034A KR101218776B1 (en) | 2006-01-11 | 2006-05-30 | Method of generating multi-channel signal from down-mixed signal and computer-readable medium |
| KR10-2006-0049034 | 2006-06-30 | ||
| PCT/KR2007/000203 WO2007081166A1 (en) | 2006-01-11 | 2007-01-11 | Method, medium, and system decoding and encoding a multi-channel signal |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012253715A Division JP5563647B2 (en) | 2006-01-11 | 2012-11-19 | Multi-channel decoding method and multi-channel decoding apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2009523259A true JP2009523259A (en) | 2009-06-18 |
| JP5437638B2 JP5437638B2 (en) | 2014-03-12 |
Family
ID=38688335
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008550238A Active JP5437638B2 (en) | 2006-01-11 | 2007-01-11 | Multi-channel decoding method |
| JP2012253715A Active JP5563647B2 (en) | 2006-01-11 | 2012-11-19 | Multi-channel decoding method and multi-channel decoding apparatus |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012253715A Active JP5563647B2 (en) | 2006-01-11 | 2012-11-19 | Multi-channel decoding method and multi-channel decoding apparatus |
Country Status (5)
| Country | Link |
|---|---|
| US (2) | US9369164B2 (en) |
| EP (2) | EP2541546A1 (en) |
| JP (2) | JP5437638B2 (en) |
| KR (2) | KR101218776B1 (en) |
| WO (1) | WO2007081166A1 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015517688A (en) * | 2012-05-18 | 2015-06-22 | ドルビー ラボラトリーズ ライセンシング コーポレイション | System for maintaining reversible dynamic range control information related to parametric audio coders |
| US11708741B2 (en) | 2012-05-18 | 2023-07-25 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
Families Citing this family (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI393121B (en) * | 2004-08-25 | 2013-04-11 | 杜比實驗室特許公司 | Method and apparatus for processing a set of N sound signals and computer programs associated therewith |
| CN101473645B (en) * | 2005-12-08 | 2011-09-21 | 韩国电子通信研究院 | Object-based 3D audio service system using preset audio scenes |
| KR100803212B1 (en) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | Scalable channel decoding method and apparatus |
| KR101218776B1 (en) | 2006-01-11 | 2013-01-18 | 삼성전자주식회사 | Method of generating multi-channel signal from down-mixed signal and computer-readable medium |
| KR100873136B1 (en) * | 2006-03-06 | 2008-12-09 | 엘지전자 주식회사 | Apparatus for decoding signal and method thereof |
| KR100773560B1 (en) | 2006-03-06 | 2007-11-05 | 삼성전자주식회사 | Method and apparatus for synthesizing stereo signal |
| KR100763920B1 (en) * | 2006-08-09 | 2007-10-05 | 삼성전자주식회사 | Method and apparatus for decoding an input signal obtained by compressing a multichannel signal into a mono or stereo signal into a binaural signal of two channels |
| KR101464977B1 (en) * | 2007-10-01 | 2014-11-25 | 삼성전자주식회사 | Memory management method, and method and apparatus for decoding multi-channel data |
| WO2009084918A1 (en) * | 2007-12-31 | 2009-07-09 | Lg Electronics Inc. | A method and an apparatus for processing an audio signal |
| KR20110018107A (en) * | 2009-08-17 | 2011-02-23 | 삼성전자주식회사 | Residual signal encoding and decoding method and apparatus |
| EP2323130A1 (en) * | 2009-11-12 | 2011-05-18 | Koninklijke Philips Electronics N.V. | Parametric encoding and decoding |
| TWI444989B (en) * | 2010-01-22 | 2014-07-11 | Dolby Lab Licensing Corp | Using multichannel decorrelation for improved multichannel upmixing |
| WO2011094675A2 (en) * | 2010-02-01 | 2011-08-04 | Rensselaer Polytechnic Institute | Decorrelating audio signals for stereophonic and surround sound using coded and maximum-length-class sequences |
| TR201900417T4 (en) * | 2010-08-25 | 2019-02-21 | Fraunhofer Ges Forschung | A device for encoding an audio signal having more than one channel. |
| EP2830334A1 (en) | 2013-07-22 | 2015-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multi-channel audio decoder, multi-channel audio encoder, methods, computer program and encoded audio representation using a decorrelation of rendered audio signals |
| CN105612766B (en) | 2013-07-22 | 2018-07-27 | 弗劳恩霍夫应用研究促进协会 | Use Multi-channel audio decoder, Multichannel audio encoder, method and the computer-readable medium of the decorrelation for rendering audio signal |
| TWI774136B (en) * | 2013-09-12 | 2022-08-11 | 瑞典商杜比國際公司 | Decoding method, and decoding device in multichannel audio system, computer program product comprising a non-transitory computer-readable medium with instructions for performing decoding method, audio system comprising decoding device |
| EP3061088B1 (en) | 2013-10-21 | 2017-12-27 | Dolby International AB | Decorrelator structure for parametric reconstruction of audio signals |
| WO2016003206A1 (en) * | 2014-07-01 | 2016-01-07 | 한국전자통신연구원 | Multichannel audio signal processing method and device |
| US9883308B2 (en) | 2014-07-01 | 2018-01-30 | Electronics And Telecommunications Research Institute | Multichannel audio signal processing method and device |
| WO2016133366A1 (en) * | 2015-02-17 | 2016-08-25 | 한국전자통신연구원 | Multichannel signal processing method, and multichannel signal processing apparatus for performing same |
| US10225675B2 (en) | 2015-02-17 | 2019-03-05 | Electronics And Telecommunications Research Institute | Multichannel signal processing method, and multichannel signal processing apparatus for performing the method |
| EP3067885A1 (en) * | 2015-03-09 | 2016-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for encoding or decoding a multi-channel signal |
| WO2016163329A1 (en) * | 2015-04-08 | 2016-10-13 | ソニー株式会社 | Transmission device, transmission method, reception device, and reception method |
| US10504528B2 (en) | 2015-06-17 | 2019-12-10 | Samsung Electronics Co., Ltd. | Method and device for processing internal channels for low complexity format conversion |
| US9820073B1 (en) | 2017-05-10 | 2017-11-14 | Tls Corp. | Extracting a common signal from multiple audio signals |
| US10475457B2 (en) * | 2017-07-03 | 2019-11-12 | Qualcomm Incorporated | Time-domain inter-channel prediction |
| CN114005455A (en) | 2017-08-10 | 2022-02-01 | 华为技术有限公司 | Time domain stereo coding and decoding method and related products |
| GB201718341D0 (en) * | 2017-11-06 | 2017-12-20 | Nokia Technologies Oy | Determination of targeted spatial audio parameters and associated spatial audio playback |
| GB2572650A (en) | 2018-04-06 | 2019-10-09 | Nokia Technologies Oy | Spatial audio parameters and associated spatial audio playback |
| GB2574239A (en) | 2018-05-31 | 2019-12-04 | Nokia Technologies Oy | Signalling of spatial audio parameters |
Family Cites Families (60)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5649029A (en) | 1991-03-15 | 1997-07-15 | Galbi; David E. | MPEG audio/video decoder |
| SG43996A1 (en) | 1993-06-22 | 1997-11-14 | Thomson Brandt Gmbh | Method for obtaining a multi-channel decoder matrix |
| JP2851804B2 (en) | 1993-12-27 | 1999-01-27 | 松下電器産業株式会社 | 2D orthogonal transform device |
| KR0162219B1 (en) | 1995-04-28 | 1999-03-20 | 김광호 | Digital audio signal decoder |
| JP3290992B2 (en) * | 1995-05-18 | 2002-06-10 | アクテル・コーポレイション | Flexible FPGA input / output architecture |
| US5781882A (en) | 1995-09-14 | 1998-07-14 | Motorola, Inc. | Very low bit rate voice messaging system using asymmetric voice compression processing |
| DE69728330T2 (en) | 1996-02-08 | 2005-02-10 | Koninklijke Philips Electronics N.V. | WITH A 5-CHANNEL TRANSMISSION AND A 2-CHANNEL TRANSMISSION COMPATIBLE 7-CHANNEL TRANSMISSION |
| JPH11225390A (en) | 1998-02-04 | 1999-08-17 | Matsushita Electric Ind Co Ltd | Multi-channel data playback method |
| KR20010086976A (en) | 2000-03-06 | 2001-09-15 | 김규태, 이교식 | Channel down mixing apparatus |
| JP4304401B2 (en) | 2000-06-07 | 2009-07-29 | ソニー株式会社 | Multi-channel audio playback device |
| KR20020018730A (en) | 2000-09-04 | 2002-03-09 | 박종섭 | Storing and playback of multi-channel video and audio signal |
| US6934825B1 (en) | 2000-09-21 | 2005-08-23 | International Business Machines Corporation | Bi-directional stack in a linear memory array |
| US7660424B2 (en) | 2001-02-07 | 2010-02-09 | Dolby Laboratories Licensing Corporation | Audio channel spatial translation |
| JP2002318598A (en) | 2001-04-20 | 2002-10-31 | Toshiba Corp | Information reproducing apparatus, information reproducing method, information recording medium, information recording apparatus, information recording method, and information recording program |
| US7006636B2 (en) | 2002-05-24 | 2006-02-28 | Agere Systems Inc. | Coherence-based audio coding and synthesis |
| US7292901B2 (en) | 2002-06-24 | 2007-11-06 | Agere Systems Inc. | Hybrid multi-channel/cue coding/decoding of audio signals |
| JP2003102100A (en) * | 2001-09-20 | 2003-04-04 | Pioneer Electronic Corp | Digital acoustic reproducing device, acoustic device, and acoustic reproducing system |
| TW569551B (en) | 2001-09-25 | 2004-01-01 | Roger Wallace Dressler | Method and apparatus for multichannel logic matrix decoding |
| JP4805541B2 (en) | 2002-04-10 | 2011-11-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Stereo signal encoding |
| ATE332003T1 (en) | 2002-04-22 | 2006-07-15 | Koninkl Philips Electronics Nv | PARAMETRIC DESCRIPTION OF MULTI-CHANNEL AUDIO |
| ES2294300T3 (en) | 2002-07-12 | 2008-04-01 | Koninklijke Philips Electronics N.V. | AUDIO CODING |
| US7502743B2 (en) | 2002-09-04 | 2009-03-10 | Microsoft Corporation | Multi-channel audio encoding and decoding with multi-channel transform selection |
| JP2004194100A (en) | 2002-12-12 | 2004-07-08 | Renesas Technology Corp | Audio decoding reproduction apparatus |
| JP2004312484A (en) | 2003-04-09 | 2004-11-04 | Sony Corp | Sound conversion device and sound conversion method |
| US7447317B2 (en) | 2003-10-02 | 2008-11-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V | Compatible multi-channel coding/decoding by weighting the downmix channel |
| KR20050038096A (en) | 2003-10-21 | 2005-04-27 | 주식회사 우주통신 | Frame buffer controller for multi-channel mpeg image compress installation |
| US7970144B1 (en) | 2003-12-17 | 2011-06-28 | Creative Technology Ltd | Extracting and modifying a panned source for enhancement and upmix of audio signals |
| US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
| US7805313B2 (en) | 2004-03-04 | 2010-09-28 | Agere Systems Inc. | Frequency-based coding of channels in parametric multi-channel coding systems |
| SE0400998D0 (en) | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Method for representing multi-channel audio signals |
| JP4123376B2 (en) | 2004-04-27 | 2008-07-23 | ソニー株式会社 | Signal processing apparatus and binaural reproduction method |
| KR100644617B1 (en) | 2004-06-16 | 2006-11-10 | 삼성전자주식회사 | Apparatus and method for reproducing 7.1 channel audio |
| KR100663729B1 (en) | 2004-07-09 | 2007-01-02 | 한국전자통신연구원 | Method and apparatus for multi-channel audio signal encoding and decoding using virtual sound source location information |
| US7391870B2 (en) | 2004-07-09 | 2008-06-24 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E V | Apparatus and method for generating a multi-channel output signal |
| CN101014998B (en) | 2004-07-14 | 2011-02-23 | 皇家飞利浦电子股份有限公司 | Audio channel conversion |
| US7356152B2 (en) * | 2004-08-23 | 2008-04-08 | Dolby Laboratories Licensing Corporation | Method for expanding an audio mix to fill all available output channels |
| SE0402649D0 (en) | 2004-11-02 | 2004-11-02 | Coding Tech Ab | Advanced methods of creating orthogonal signals |
| KR101183859B1 (en) * | 2004-11-04 | 2012-09-19 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | Encoding and decoding of multi-channel audio signals |
| EP1691348A1 (en) | 2005-02-14 | 2006-08-16 | Ecole Polytechnique Federale De Lausanne | Parametric joint-coding of audio sources |
| KR20060109297A (en) | 2005-04-14 | 2006-10-19 | 엘지전자 주식회사 | Method and apparatus for encoding / decoding audio signal |
| WO2006108543A1 (en) * | 2005-04-15 | 2006-10-19 | Coding Technologies Ab | Temporal envelope shaping of decorrelated signal |
| KR20070005468A (en) | 2005-07-05 | 2007-01-10 | 엘지전자 주식회사 | A method of generating an encoded audio signal, an encoding device for generating the encoded audio signal, and a decoding device for decoding the encoded audio signal |
| ATE523877T1 (en) | 2005-07-14 | 2011-09-15 | Koninkl Philips Electronics Nv | AUDIO CODING |
| US20070055510A1 (en) * | 2005-07-19 | 2007-03-08 | Johannes Hilpert | Concept for bridging the gap between parametric multi-channel audio coding and matrixed-surround multi-channel coding |
| US7761177B2 (en) | 2005-07-29 | 2010-07-20 | Lg Electronics Inc. | Method for generating encoded audio signal and method for processing audio signal |
| US7962340B2 (en) | 2005-08-22 | 2011-06-14 | Nuance Communications, Inc. | Methods and apparatus for buffering data for use in accordance with a speech recognition system |
| WO2007027050A1 (en) | 2005-08-30 | 2007-03-08 | Lg Electronics Inc. | Apparatus for encoding and decoding audio signal and method thereof |
| JP5173811B2 (en) | 2005-08-30 | 2013-04-03 | エルジー エレクトロニクス インコーポレイティド | Audio signal decoding method and apparatus |
| KR20070035411A (en) | 2005-09-27 | 2007-03-30 | 엘지전자 주식회사 | Method and apparatus for encoding / decoding spatial information of multi-channel audio signal |
| KR100888474B1 (en) * | 2005-11-21 | 2009-03-12 | 삼성전자주식회사 | Apparatus and method for encoding/decoding multichannel audio signal |
| KR101218776B1 (en) | 2006-01-11 | 2013-01-18 | 삼성전자주식회사 | Method of generating multi-channel signal from down-mixed signal and computer-readable medium |
| KR100803212B1 (en) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | Scalable channel decoding method and apparatus |
| JP4940671B2 (en) | 2006-01-26 | 2012-05-30 | ソニー株式会社 | Audio signal processing apparatus, audio signal processing method, and audio signal processing program |
| FR2899423A1 (en) | 2006-03-28 | 2007-10-05 | France Telecom | Three-dimensional audio scene binauralization/transauralization method for e.g. audio headset, involves filtering sub band signal by applying gain and delay on signal to generate equalized and delayed component from each of encoded channels |
| US7965848B2 (en) | 2006-03-29 | 2011-06-21 | Dolby International Ab | Reduced number of channels decoding |
| KR100763919B1 (en) | 2006-08-03 | 2007-10-05 | 삼성전자주식회사 | Method and apparatus for decoding an input signal obtained by compressing a multichannel signal into a mono or stereo signal into a binaural signal of two channels |
| JP4435146B2 (en) | 2006-12-28 | 2010-03-17 | 株式会社東芝 | Communication device |
| AU2007201109B2 (en) | 2007-03-14 | 2010-11-04 | Tyco Electronics Services Gmbh | Electrical Connector |
| US8015368B2 (en) | 2007-04-20 | 2011-09-06 | Siport, Inc. | Processor extensions for accelerating spectral band replication |
| US7885819B2 (en) | 2007-06-29 | 2011-02-08 | Microsoft Corporation | Bitstream syntax for multi-process audio decoding |
-
2006
- 2006-05-30 KR KR1020060049034A patent/KR101218776B1/en active Active
-
2007
- 2007-01-10 US US11/651,633 patent/US9369164B2/en active Active
- 2007-01-11 WO PCT/KR2007/000203 patent/WO2007081166A1/en not_active Ceased
- 2007-01-11 EP EP20120164460 patent/EP2541546A1/en not_active Ceased
- 2007-01-11 EP EP07708488.7A patent/EP1977417B1/en not_active Not-in-force
- 2007-01-11 JP JP2008550238A patent/JP5437638B2/en active Active
-
2012
- 2012-07-30 KR KR1020120083520A patent/KR101218777B1/en active Active
- 2012-11-19 JP JP2012253715A patent/JP5563647B2/en active Active
-
2016
- 2016-06-13 US US15/180,930 patent/US9706325B2/en active Active
Non-Patent Citations (1)
| Title |
|---|
| JPN7011001999; Ｊ．Ｈｅｒｒｅ ｅｔａｌ: 'Ｔｈｅ Ｒｅｆｅｒｅｎｃｅ Ｍｏｄｅｌ Ａｒｃｈｔｅｃｔｕｒｅ ｆｏｒ ＭＰＥＧ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ' Ａｕｄｉｏ Ｅｎｇｉｎｅｅｒｉｎｇ Ｓｏｃｉｅｔｙ Ｃｏｎｖｅｎｔｉｏｎ Ｐａｐｅｒ ６４４７ , 20050528, Ａｕｄｉｏ Ｅｎｇｉｎｅｅｒｉｎｇ Ｓｏｃｉｅｔｙ * |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015517688A (en) * | 2012-05-18 | 2015-06-22 | ドルビー ラボラトリーズ ライセンシング コーポレイション | System for maintaining reversible dynamic range control information related to parametric audio coders |
| US9721578B2 (en) | 2012-05-18 | 2017-08-01 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US9881629B2 (en) | 2012-05-18 | 2018-01-30 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US10074379B2 (en) | 2012-05-18 | 2018-09-11 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US10217474B2 (en) | 2012-05-18 | 2019-02-26 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US10388296B2 (en) | 2012-05-18 | 2019-08-20 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US10522163B2 (en) | 2012-05-18 | 2019-12-31 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US10950252B2 (en) | 2012-05-18 | 2021-03-16 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US11708741B2 (en) | 2012-05-18 | 2023-07-25 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
| US12175992B2 (en) | 2012-05-18 | 2024-12-24 | Dolby Laboratories Licensing Corporation | System for maintaining reversible dynamic range control information associated with parametric audio coders |
Also Published As
| Publication number | Publication date |
|---|---|
| US9369164B2 (en) | 2016-06-14 |
| JP2013033299A (en) | 2013-02-14 |
| US9706325B2 (en) | 2017-07-11 |
| EP1977417A4 (en) | 2010-02-03 |
| KR20070094422A (en) | 2007-09-20 |
| JP5437638B2 (en) | 2014-03-12 |
| EP1977417A1 (en) | 2008-10-08 |
| JP5563647B2 (en) | 2014-07-30 |
| US20070189426A1 (en) | 2007-08-16 |
| WO2007081166A1 (en) | 2007-07-19 |
| EP2541546A1 (en) | 2013-01-02 |
| EP1977417B1 (en) | 2015-03-11 |
| KR101218776B1 (en) | 2013-01-18 |
| KR20120099191A (en) | 2012-09-07 |
| KR101218777B1 (en) | 2013-01-21 |
| US20160302021A1 (en) | 2016-10-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5563647B2 (en) | Multi-channel decoding method and multi-channel decoding apparatus | |
| JP4801742B2 (en) | Scalable channel decoding method, recording medium, and system | |
| KR101058047B1 (en) | Method for generating stereo signal | |
| JP6732739B2 (en) | Audio encoders and decoders | |
| JP2009536360A (en) | Audio decoding | |
| TW202103144A (en) | Apparatus, method or computer program for generating an output downmix representation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110607 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20110907 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20110914 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20111007 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20111017 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111207 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120717 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121119 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20121130 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20130125 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130517 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130522 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130619 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130626 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131004 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131212 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5437638 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |