JP2003348594A

JP2003348594A - 画像復号装置及び方法

Info

Publication number: JP2003348594A
Application number: JP2002152717A
Authority: JP
Inventors: Yoshiyuki Ogura; 誉之小倉; Masatoshi Takashima; 昌利高嶋
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2002-05-27
Filing date: 2002-05-27
Publication date: 2003-12-05
Also published as: US20040240547A1; WO2003101118A1; US7248633B2; CN1547857A; KR20050012706A

Abstract

(57)【要約】【課題】復号中の画像のブロックが動き補償でエラー
を含むフレームを参照している場合であっても、エラー
コンシール処理に伴うエラーの伝播を抑え、画質劣化を
少なくする。【解決手段】ＭＰＥＧ復号装置１０には、動き補償回
路１５と、上記動き補償を行う際に参照する復号済みの
フレームに対するエラーマップテーブルを保持するエラ
ーマップテーブル１９とが設けられている。エラーマッ
プテーブル１９には、復号済みのフレーム内に存在する
エラーブロックが示されている。動き補償回路１５は、
エラーマップテーブル１９を参照して参照エリアに含ま
れるブロックにエラーブロックが含まれている場合、又
は、復号対象ブロックの動画像符号化データが破損して
いる場合には、復号対象ブロック内の画素を復号済みの
フレームの画素で補間して出力するエラーコンシール処
理を行う。また、動き補償回路１５は、エラーコンシー
ル処理を行ったブロックをエラーブロックとしたエラー
マップテーブルを生成し、格納する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、所定の画素数から
構成されるブロック単位で行われた動き予測を利用して
符号化された動画像信号を、復号する画像復号装置及び
方法に関するものである。

【０００２】

【従来の技術】動画像信号の圧縮符号化方式として、Ｍ
ＰＥＧ−２（ISO/IEC 13818-2）やＭＰＥＧ−４（ISO/I
EC 14496-2）等が知られている。ＭＰＥＧ−２及びＭＰ
ＥＧ−４では、動き予測を利用した符号化方式を用い
て、動画像信号を圧縮している。ＭＰＥＧ−２及びＭＰ
ＥＧ−４では、例えば１６×１６或いは１６×８画素か
ら構成される画素ブロック（マクロブロックと呼ばれ
る。）単位で、フレーム間の動き予測を行う。ＭＰＥＧ
−２及びＭＰＥＧ−４では、予測した動き量をベクトル
（動きベクトルと呼ばれる。）で表し、符号化データに
含める。ＭＰＥＧ−２及びＭＰＥＧ−４では、符号化時
には、先に符号化したフレームから動きベクトルを利用
して予測フレームを生成し、符号化対象フレームとその
予測フレームとの差分を算出し、その差分のみを例えば
ＤＣＴにより符号化する。ＭＰＥＧ−２及びＭＰＥＧ−
４では、復号時には、先に復号されている参照フレーム
に対して動きベクトルを用いて予測フレームを生成し、
その予測フレームと復号されたフレームとを加算して、
元画像を復元する。

【０００３】このため、ＭＰＥＧ−２及びＭＰＥＧ−４
等の動き予測を利用した符号化方式では、動きベクトル
及び差分画像のみを符号化すればよいため、効率よく動
画像データを圧縮することができることとなる。

【０００４】つぎに、ＭＰＥＧ−２方式又はＭＰＥＧ−
４で圧縮符号化された動画像データストリーム（エレメ
ンタリストリーム）を復号する従来のＭＰＥＧ復号装置
について説明をする。

【０００５】図１５に、従来のＭＰＥＧ復号装置のブロ
ック構成図を示す。

【０００６】従来のＭＰＥＧ復号装置１００は、構文解
析回路１１１と、可変長コード（ＶＬＣ）テーブル１１
２と、逆量子化（ＩＱ）回路１１３と、逆離散コサイン
変換（ＩＤＣＴ）回路１１４と、動き補償回路１１５
と、フレームメモリ１１６と、カラーフォーマット変換
回路１１７とを備えている。また、動き補償回路１１５
の内部には、セレクタ１２１と、ＭＣコントローラ１２
２と、加算器１２３とが備えられている。

【０００７】エレメンタリストリームは、構文解析回路
１１１に入力される。構文解析回路１１１は、入力され
たエレメンタリストリームから、固定長符号の検出、可
変長符号のコード長の解析、可変長コードテーブルのア
ドレス算出を行う。構文解析回路１１１は、算出したア
ドレスからＶＬＣテーブル１１２を参照し、可変長符号
化前のコードを検出する。構文解析回路１１１は、これ
ら固定長符号及び可変長符号を検出することにより、例
えば、ＤＣＴ係数データ、動きベクトル、逆量子化や動
き補償のための各種制御データ等を復号する。ＤＣＴ係
数データは、所定のスキャン順序で並べ替えが行われた
のち逆量子化回路１１３に供給される。動きベクトル及
び動き補償のための制御データは、動き補償回路１１５
のＭＣコントローラ１２２に供給される。

【０００８】また、構文解析回路１１１は、入力された
エレメンタリストリームに、ＶＬＣテーブル１１２に存
在しないコードが入力された場合、或いは、１つのＤＣ
Ｔブロック内のＤＣＴ係数の数が６４を超えている場合
など、出力するＤＣＴ係数にエラーが発生している場合
に、エラーフラグを出力する。エラーフラグは、マクロ
ブロック単位で発生される。エラーフラグは、動き補償
回路１１５内のＭＣコントローラ１２２に供給される。

【０００９】逆量子化回路１１３は、符号化時に用いら
れた量子化パラメータで、ＤＣＴ係数データの逆量子化
処理を行う。逆量子化処理がされたＤＣＴ係数データ
は、逆離散コサイン変換回路１１４に供給される。

【００１０】逆離散コサイン変換１１４は、８×８個の
ＤＣＴ係数から構成されるＤＣＴブロック単位で、ＤＣ
Ｔ係数データに対して２次元の逆離散コサイン変換演算
を行い、空間領域の画像データを復号する。逆離散コサ
イン変換がされた画像データは、動き補償回路１１５に
供給される。

【００１１】動き補償回路１１５では、逆離散コサイン
変換された空間領域の画像データに対して、動き補償処
理を行う。

【００１２】動き補償回路１１５内のＭＣコントローラ
１２２は、構文解析回路１１１から供給された動きベク
トル及び動き補償のための制御データに基づき、フレー
ムメモリ１１６に格納されている参照フレームに対し
て、マクロブロック単位で動き予測を行って、予測フレ
ームを生成する。動き補償回路１１５内の加算器１２３
は、参照フレームから生成された予測フレームと、逆離
散コサイン変換回路１１４から供給された差分フレーム
とを、マクロブロックごとに加算して、元フレームを生
成する。加算器１２３から出力されたフレームは、復号
されたフレームとして、フレームメモリ１１６内に格納
される。

【００１３】動き補償回路１１５内のセレクタ１２１
は、エラーコンシール処理時に、離散コサイン変換回路
１１４からの差分フレームの出力を、マクロブロック単
位で停止する処理を行う。

【００１４】エラーコンシール処理は、例えば伝送時等
に符号データにエラーが生じ、周辺の正常な画像と極端
に異なってしまうマクロブロックがある場合に、そのエ
ラー部分の視覚的な違和感を低減する処理である。

【００１５】ＭＣコントローラ１２２は、構文解析回路
１１１によりエラーフラグが立てられたマクロブロック
に対してエラーコンシール処理を行う。ＭＣコントロー
ラ１２２は、構文解析回路１１１によりエラーフラグが
立てられたマクロブロック、すなわち、エラーが発生し
て画像が壊れてしまっているマクロブロックが、動き補
償の対象マクロブロックとなっている場合、通常の動き
補償を行わず、そのエラーが発生しているマクロブロッ
ク内の画素を、そのマクロブロックと同位置にある参照
フレーム内の画素で補間する処理を行うことによって、
エラーコンシール処理を行う。具体的には、ＭＣコント
ローラ１２２は、そのマクロブロックのＭＢモード（参
照フレームを指定するモード）をＩピクチャ又はＰピク
チャを参照するモードとし、動きベクトルの値を０とし
（つまり、参照フレームからの動きがないものとし）、
さらに、復号対象となるマクロブロックの値を０とする
（つまり、セレクタ１２１を切り換えて、逆離散コサイ
ン変換回路１１４から動き補償回路１１５への入力デー
タを０とする）ことにより、エラーコンシール処理を行
う。

【００１６】カラーフォーマット変換回路１１７は、フ
レームメモリ１１６内に格納されている復号された画像
データに対して、ビデオフォーマットの変換処理を行
う。例えば、ＩＴＵ−Ｒ６０１で規定されている４：
２：２フォーマットや４：２：０フォーマットへのフォ
ーマット変換を行う。

【００１７】以上のように、従来のＭＰＥＧ復号装置１
００では、動き予測を利用した符号化データを復号する
ことができる。また、従来のＭＰＥＧ復号装置１００で
は、エラーコンシール処理を行うことにより、例えば伝
送時等に破壊されてしまった画像ブロックがフレーム内
に存在する場合でも、その画像ブロックを破壊されてい
ない他のフレームの画像ブロックで補間することができ
る。そのため、エラーが生じてしまい、周辺の正常な画
像と極端に異なってしまうブロックがあることによる視
覚な違和感を低減することができる。

【００１８】

【発明が解決しようとする課題】ところで、動き補償を
行う場合、エラーコンシール処理が行われたフレームが
参照フレームとなり、さらに、エラーコンシール処理が
されたマクロブロック内の画素が動き補償で参照されて
しまうと、誤った参照値に基づき動き補償がされてしま
う。このように誤った参照値に基づき動き補償が行われ
ると、そのマクロブロック内の画像は、絵として破壊さ
れてしまう。また、次のフレームに対して動き補償を行
う場合、絵として破壊されてしまったマクロブロック内
の画素が、さらに参照される可能性もある。すなわち、
エラーコンシール処理を行うことにより、そのエラーが
時間的、空間的に伝播してしまう可能性がある。

【００１９】図１６、図１７及び図１８を参照して、エ
ラーコンシール処理がされたマクロブロックの影響が、
時間的，空間的に伝播していく様子について説明をす
る。

【００２０】まず、図１６に示すように、在るＩピクチ
ャ（Ｉ_１）の在る２つのマクロブロック（ＭＢ_３，ＭＢ
_４）に伝送エラーが発生していたとする。この場合、こ
れらのマクロブロック（ＭＢ_３，ＭＢ_４）は、エラーコ
ンシール処理が行われることにより、例えば、Ｉ_１の一
つ前のＰピクチャ（Ｐ_０）内の同一位置のマクロブロッ
ク（ＭＢ_３，ＭＢ_４）で補間される。このため復号後の
Ｉ_１のマクロブロック（ＭＢ_３，ＭＢ_４）の画像は、本
来の絵とは異なっているが、絵としては壊れていない状
態となる。

【００２１】続いて、次のＰピクチャ（Ｐ_２）は、動き
補償の参照フレームがＩ_１となる。このＰ_２には、伝送
エラーは存在しないので、エラーコンシール処理はされ
ない。しかしながら、例えば、図１７に示すように、Ｐ
_２内のある３つのマクロブロック（ＭＢ_１，ＭＢ_３，Ｍ
Ｂ_４）は、動き補償のための参照エリア内に、参照フレ
ーム内のエラーコンシール処理をしたマクロブロック内
の画素が含まれている。このため復号後のマクロブロッ
ク（ＭＢ_１，ＭＢ_３，ＭＢ_４）の画像は、本来の絵とは
異なっているとともに、その絵自体が壊れてしまってい
る。

【００２２】続いて、さらに次のＰピクチャ（Ｐ_３）
は、動き補償の参照フレームがＰ_２となる。このＰ_３に
は、在る１つのマクロブロック（ＭＢ_４）に伝送エラー
が発生している。この場合、そのマクロブロック（ＭＢ
_４）は、エラーコンシール処理が行われることにより、
例えば、Ｐ_３の一つ前のＰピクチャ（Ｐ_２）内の同一位
置のマクロブロック（ＭＢ_４）で補間される。しかしな
がら、一つ前の補間元となるマクロブロック（ＭＢ_４）
は、既にその絵自体が壊れてしまっているため、補間の
マクロブロック（ＭＢ_４）の画像も、本来の絵とは異な
っているとともに、その絵自体が壊れてしまう。

【００２３】さらに、Ｐピクチャ（Ｐ_３）では、例え
ば、在るマクロブロック（ＭＢ_１，ＭＢ_２，ＭＢ_３）の
動き補償のための参照エリアに、参照フレーム内のエラ
ーコンシール処理をしたマクロブロック内の画素が含ま
れている。このため復号後のマクロブロック（ＭＢ_１，
ＭＢ_２，ＭＢ_３）の画像は、本来の絵とは異なっている
とともに、その絵自体が壊れてしまっている。以上のよ
うに、エラーコンシール処理をした場合、次のＩピクチ
ャ（Ｉ_４）の復号が行われるまでエラーが伝播されてい
ってしまい、さらに、動き補償を行うことによりエラー
が平面方向に広がってきてしまう。このようにエラーが
拡大することによって、画像の劣化が激しくなってしま
う。

【００２４】本発明は、復号中の画像のブロックが動き
補償でエラーを含むフレームを参照している場合であっ
ても、そのエラーの伝播を抑え、画質劣化を少なくした
動画像復号装置及び方法を提供することを目的とする。

【００２５】

【課題を解決するための手段】本発明にかかる画像復号
装置は、フレーム内を複数のブロックに分割し、このブ
ロック単位で動き予測符号化が行われる符号化方式で符
号化された動画像符号化データを、復号する画像復号装
置であって、動き予測符号化が行われたブロックが復号
対象ブロックとなっている場合、上記画像符号化データ
に含まれている動き予測情報を用いて復号済みのフレー
ム上の参照エリアを特定し、特定した参照エリアの情報
を用いて復号対象ブロックに対して動き補償を行う動き
補償手段と、上記動き補償を行う際に参照する復号済み
のフレームに対するエラーマップテーブルを保持するエ
ラーマップテーブル保持手段とを備え、上記エラーマッ
プテーブルには、復号済みのフレーム内に存在するエラ
ーブロックが示されており、上記動き補償手段は、上記
エラーマップテーブルを参照して上記参照エリアに含ま
れるブロックにエラーブロックが含まれている場合、又
は、復号対象ブロックの動画像符号化データが破損して
いる場合には、復号対象ブロック内の画素を復号済みの
フレームの画素で補間して出力するエラーコンシール処
理を行い、上記エラーコンシール処理を行ったブロック
をエラーブロックとしたエラーマップテーブルを生成
し、上記エラーマップテーブル保持手段に格納すること
を特徴とする。

【００２６】本発明にかかる画像復号方法は、フレーム
内を複数のブロックに分割し、このブロック単位で動き
予測符号化が行われる符号化方式で符号化された動画像
符号化データを、復号する画像復号方法であって、上記
画像符号化データに含まれている動き予測情報を用いて
復号済みのフレーム上の参照エリアを特定し、特定した
参照エリアの情報を用いて復号対象ブロックに対して動
き補償を行って、動画像符号化データを復号し、上記動
き補償を行う際に、復号済みのフレーム内に存在するエ
ラーブロックが示されたエラーマップテーブルを参照し
て上記参照エリアに含まれるブロックにエラーブロック
が含まれている場合、又は、復号対象ブロックの動画像
符号化データが破損している場合には、復号対象ブロッ
ク内の画素を復号済みのフレームの画素で補間して出力
するエラーコンシール処理を行い、上記エラーコンシー
ル処理を行ったブロックをエラーブロックとした上記エ
ラーマップテーブルを生成することを特徴とする。

【００２７】

【発明の実施の形態】以下、本発明の実施の形態とし
て、本発明を適用したＭＰＥＧ復号装置について説明を
する。本発明の実施の形態のＭＰＥＧ復号装置は、ＭＰ
ＥＧ−２方式（ISO/IEC 13818-2）又はＭＰＥＧ−４方
式（ISO/IEC 14496-2）で圧縮符号化された画像データ
ストリーム（エレメンタリストリーム）を復号する装置
である。なお、ＭＰＥＧ−２及びＭＰＥＧ−４では、所
定の画素ブロック単位で、フレーム間の動き予測を行っ
て圧縮符号化が行われる。動き予測を行う最小の画素ブ
ロック単位を以下マクロブロックと呼ぶものとする。

【００２８】（ＭＰＥＧ復号装置の構成）図１に、本発
明の実施の形態のＭＰＥＧ復号装置１０のブロック構成
図を示す。

【００２９】ＭＰＥＧ復号装置１０は、構文解析回路１
１と、可変長コード（ＶＬＣ）テーブル１２と、逆量子
化（ＩＱ）回路１３と、逆離散コサイン変換（ＩＤＣ
Ｔ）回路１４と、動き補償回路１５と、フレームメモリ
１６と、カラーフォーマット変換回路１７と、エラーコ
ントローラ１８と、２つのエラーマップテーブル格納部
１９ａ，１９ｂとを備えている。また、動き補償回路１
５の内部には、セレクタ２１と、ＭＣコントローラ２２
と、加算器２３とが備えられている。

【００３０】エレメンタリストリームは、構文解析回路
１１に入力される。構文解析回路１１は、入力されたエ
レメンタリストリームから、固定長符号の検出、可変長
符号のコード長の解析、可変長コードテーブルのアドレ
ス算出を行う。構文解析回路１１は、算出したアドレス
からＶＬＣテーブル１２を参照し、可変長符号化前のコ
ードを検出する。構文解析回路１１は、これら固定長符
号及び可変長符号を検出することにより、例えば、ＤＣ
Ｔ係数データ、動きベクトル、逆量子化や動き補償のた
めの各種制御データ等を復号する。ＤＣＴ係数データ
は、所定のスキャン順序で並べ替えが行われたのち逆量
子化回路１３に供給される。動きベクトル及び動き補償
のための制御データは、動き補償回路１５のＭＣコント
ローラ２２に供給される。

【００３１】また、構文解析回路１１は、入力されたエ
レメンタリストリームに、ＶＬＣテーブル１２に存在し
ないコードが入力された場合、或いは、１つのＤＣＴブ
ロック内のＤＣＴ係数の数が６４を超えている場合な
ど、出力するＤＣＴ係数にエラーが発生している場合
に、エラーフラグを出力する。このエラーフラグは、マ
クロブロック毎に発生される。発生されたエラーフラグ
は、動き補償回路１５内のＭＣコントローラ２２に供給
される。

【００３２】逆量子化回路１３は、符号化時に用いられ
た量子化パラメータで、ＤＣＴ係数データの逆量子化処
理を行う。逆量子化処理がされたＤＣＴ係数データは、
逆離散コサイン変換回路１４に供給される。

【００３３】逆離散コサイン変換１４は、例えば８×８
個のＤＣＴ係数から構成されるＤＣＴブロック単位で、
ＤＣＴ係数データに対して２次元の逆離散コサイン変換
演算を行い、空間領域の画像データを復号する。逆離散
コサイン変換がされた画像データは、動き補償回路１５
に供給される。

【００３４】動き補償回路１５は、逆離散コサイン変換
された空間領域の画像データに対して、動き補償処理を
行う。動き補償処理が行われるのは、Ｐピクチャ及びＢ
ピクチャのインターマクロブロックに対してのみであ
る。イントラマクロブロックが入力された場合には、動
き補償処理は行わない。また、動き補償回路１５は、所
定の条件に合致したマクロブロックに対してエラーコン
シール処理を行う。エラーコンシール処理は、イントラ
マクロブロック、インターマクロブロックに関わらず、
両者に対して行われる。動き補償回路１５は、エラーコ
ンシール処理を行うマクロブロックに対しては通常の動
き補償処理を行わない。本装置で適用されるエラーコン
シール処理の詳細については後述する。

【００３５】動き補償回路１５内のＭＣコントローラ２
２は、入力されたマクロブロックがインターマクロブロ
ックである場合には、構文解析回路１１から供給された
動きベクトル及び動き補償のための制御データに基づ
き、フレームメモリ１６に格納されている参照フレーム
に対して、マクロブロック単位で動き予測を行って、予
測フレームを生成する。動き補償回路１５内の加算器２
３は、参照フレームに基づき生成された予測フレーム
と、逆離散コサイン変換回路１４から出力された差分フ
レームとを、マクロブロックごとに加算して、元フレー
ムを生成する。また、ＭＣコントローラ２２は、入力さ
れたマクロブロックがイントラマクロブロックである場
合には、予測フレームを生成しない。この場合、動き補
償回路１５内の加算器２３は、離散コサイン変換回路１
４から出力されたイントラマクロブロックに対してなん
らデータを加算せず、そのままマクロブロックを出力す
る。加算器２３から出力された復元されたフレームは、
フレームメモリ１６内に格納される。

【００３６】動き補償回路１５内のセレクタ２１は、通
常の動き補償を行う場合には、離散コサイン変換回路１
４からの差分フレームの出力をそのまま加算器２３へ供
給する。一方、エラーコンシール処理時には、離散コサ
イン変換回路１４からの差分フレームの出力を、マクロ
ブロック単位で停止する処理を行う。セレクタ２１は、
ＭＣコントローラ２２により制御される。

【００３７】カラーフォーマット変換回路１７は、フレ
ームメモリ１６内に格納されている復号された画像デー
タに対して、ビデオフォーマットの変換処理を行う。例
えば、ＩＴＵ−Ｒ６０１で規定されている４：２：２フ
ォーマットや４：２：０フォーマットへのフォーマット
変換を行う。

【００３８】エラーコントローラ１８は、第１のエラー
マップテーブル格納部１９ａ及び第２のエラーマップテ
ーブル格納部１９ｂに格納されるエラーマップテーブル
の書き込み及び読み出しの更新制御を行う。エラーコン
トローラ１８は、ＭＣコントローラ２２から出力される
エラーコンシール情報に基づき、エラーマップテーブル
の更新制御を行う。

【００３９】（エラーマップテーブル）次に、エラーマ
ップテーブルについて説明をする。

【００４０】エラーマップテーブルは、エラーコンシー
ル処理が行われたマクロブロックの位置を特定する情報
である。エラーマップテーブルは、フレーム単位で生成
される。１つのフレームが、横Ｘ個、縦Ｙ個のマクロブ
ロックから構成されているとするならば、例えば、図２
に示すように、エラーマップテーブルは、１ワードがＸ
ビットから構成されたＹワードの情報となる。つまり、
エラーマップテーブルは、各ビットのアドレス位置がフ
レーム内におけるマクロブロックの位置に対応し、各ビ
ットの内容がエラーコンシール処理を行ったか否かを示
す情報となる。なお、エラーマップテーブルの構成は、
図２のような構成に限らず、例えば、図３に示すよう
に、１ワードが１ビットから構成されるＸ×Ｙワードの
情報としても可能である。

【００４１】エラーコントローラ１８は、任意のマクロ
ブロックに対してエラーコンシール処理を行った場合に
は、復号中のフレームに対するエラーマップテーブルに
アクセスし、そのマクロブロックに対応するアドレスの
ビットの値を有効（１）とする。また、任意のマクロブ
ロックに対してエラーコンシール処理を行わなかった場
合には、復号中のフレームに対するエラーマップテーブ
ルにアクセスし、そのマクロブロックに対応するアドレ
スのビットの値を無効（０）とする。

【００４２】エラーマップテーブル格納部１９ａ，１９
ｂには、現在復号中のフレームの直前又は直後に表示さ
れる参照フレームとなり得るフレームに対するエラーマ
ップテーブルが格納されている。具体的には、現在復号
中のフレームがＰピクチャであれば、そのＰピクチャの
直前（時間的に直近の過去）のＩピクチャ又はＰピクチ
ャに対するエラーマップテーブルが、エラーマップテー
ブル格納部１９ａ，１９ｂに格納されている。現在復号
中のフレームがＢピクチャであれば、そのＢピクチャの
直前（時間的に直近の過去）のＩピクチャ又はＰピクチ
ャ、及び、そのＢピクチャの直後（時間的に直近の未
来）のＩピクチャ又はＰピクチャに対するエラーマップ
テーブルが、エラーマップテーブル格納部１９ａ，１９
ｂに格納されている。現在復号中のフレームがＩピクチ
ャであれば、そのＩピクチャの直前（時間的に直近の過
去）のＩピクチャ又はＰピクチャに対するエラーマップ
テーブルが、エラーマップテーブル格納部１９ａ，１９
ｂに格納されている。すなわち、Ｉピクチャ又はＰピク
チャの復号中であれば、エラーマップテーブル格納部１
９ａ，１９ｂのいずれか一方に、その復号中のＩピクチ
ャ又はＰピクチャの直前のＩピクチャ又はＰピクチャに
対する１つのエラーマップテーブルが格納される。Ｂピ
クチャの復号中であれば、エラーマップテーブル格納部
１９ａ，１９ｂに、その復号中のＢピクチャの直前のＩ
ピクチャ又はＰピクチャと、その復号中のＢピクチャの
直後のＩピクチャ又はＰピクチャと２つのフレームに対
するエラーマップテーブルが格納される。

【００４３】新たなエラーマップテーブルの生成は、現
在復号中のフレームが参照フレームとなり得る場合に行
われる。つまり、現在復号中のフレームがＩピクチャ又
はＰピクチャである場合に行われる。ＭＣコントローラ
２２は、現在復号中のフレームがＩピクチャ又はＰピク
チャである場合には、そのフレーム内のマクロブロック
に対してエラーコンシール処理を行ったか否かを示す情
報（エラーコンシール情報）を、１つのマクロブロック
に対する処理を行うたびにエラーコントローラ１８に送
信する。エラーコントローラ１８は、エラーコンシール
情報に基づき、エラーマップテーブル格納部１９ａ，１
９ｂ上のエラーマップテーブルを内容更新する。なお、
Ｉピクチャ又はＰピクチャの復号中には、エラーマップ
テーブル格納部１９ａ，１９ｂのいずれか一方のみに、
参照フレームに対するエラーマップテーブルが格納され
ている。つまり、Ｉピクチャ及びＰピクチャの参照フレ
ームは一つだけであるので、１つのエラーマップテーブ
ルのみが格納されている。従って、エラーコントローラ
１８は、参照フレームに対するエラーマップテーブルが
格納されていない他方の格納部上のエラーマップテーブ
ルに対して更新を行う。この結果、復号処理が進んでい
くに従い、２つのエラーマップテーブル格納部１９ａ，
１９ｂが交互に選択され、エラーマップテーブルの内容
が更新されていくこととなる。なお、Ｂピクチャは、参
照フレームとなり得ないので、Ｂピクチャの復号時に
は、現在復号中のフレームに対するエラーマップテーブ
ルの更新は行われない。ただし、Ｂピクチャに対して動
き補償を行う場合には、過去及び未来の２つの参照フレ
ームが存在するので、２つのエラーマップテーブル格納
部１９ａ，１９ｂの両者に、それぞれ有効なエラーマッ
プテーブルが格納されている。

【００４４】（エラーコンシール処理）次に、エラーコ
ンシール処理について説明をする。

【００４５】エラーコンシール処理は、動き補償の処理
対象となっているマクロブロック内の全画素を、そのマ
クロブロックと同一の位置にある参照フレーム内のマク
ロブロックの画素で補間する処理である。画素の補間処
理は、参照フレームの画素値を動き補償の処理対象とな
っているマクロブロック内の画素に置き換えてもよい
し、参照フレームの画素値に対して何らかの処理を施し
た後、動き補償の処理対象となるマクロブロックの画素
としてもよい。

【００４６】エラーコンシール処理は、ＭＣコントロー
ラ２２が行う。エラーコンシール処理は、マクロブロッ
ク単位で処理が行われる。エラーコンシール処理は、そ
のマクロブロックのＭＢモード（参照フレームを指定す
るモード）をＩピクチャ又はＰピクチャを参照するモー
ドとし、動きベクトルの値を０とし（つまり、参照フレ
ームからの動きがないものとし）、さらに、復号対象と
なるマクロブロックの値を０とする（つまり、セレクタ
２１をオフとして逆離散コサイン変換回路１４から動き
補償回路１５への入力データを０とする）ことにより行
うことができる。

【００４７】次に、本ＭＰＥＧ復号装置１０でのエラー
コンシール処理を行う条件について説明をする。

【００４８】ＭＣコントローラ２２は、現在復号中のフ
レームのピクチャタイプ、参照フレームのエラーマップ
テーブルの内容、構文解析回路１１からの現在復号中の
マクロブロックに対するエラーフラグ、現在復号中のマ
クロブロックのＭＢモードとを参照し、以下の条件１〜
３のいずれかに合致したときに、現在復号中のマクロブ
ロックに対してエラーコンシール処理を行う。

【００４９】条件１ＭＣコントローラ２２は、構文解
析回路１１からエラーフラグを受け取った場合には、そ
のエラーフラグが発生されたマクロブロックに対してエ
ラーコンシール処理を行う。つまり、ＶＬＣテーブル１
２に存在しないコードが入力された場合、或いは、１つ
のＤＣＴブロック内のＤＣＴ係数の数が６４を超えてい
る場合など、ＤＣＴ係数にエラーが発生している場合
に、エラーコンシール処理を行う。この処理条件は、従
来のエラーコンシール処理と同様である。

【００５０】条件２ＭＣコントローラ２２は、現在復
号中のマクロブロックがＰピクチャ又はＢピクチャに属
するマクロブロックであり、さらに、動き補償をする際
に参照される参照フレーム内の参照エリアが既にエラー
コンシール処理が行われている場合に、現在復号中のマ
クロブロックに対してエラーコンシール処理を行う。参
照エリアは、動き補償を行う際に参照される参照フレー
ム内の任意のエリアである。この参照エリアは、マクロ
ブロックと同一のサイズであり、復号中のマクロブロッ
クに対する動きベクトルによりその位置が特定される。
動きベクトルは、半画素単位で表される。そのため、参
照エリアは、最大で４つのマクロブロックにまたがった
位置に設定される。本条件２では、参照エリアに含まれ
ているマクロブロックのうち、１つでも既にエラーコン
シール処理がされている場合には、復号中のマクロブロ
ックに対してもエラーコンシール処理を行う。参照エリ
アに含まれているマクロブロックが既にエラーコンシー
ル処理がされているか否かの判断は、まず、参照エリア
に含まれているマクロブロック（最大で４つのマクロブ
ロック）を動きベクトルから算出し、その特定したマク
ロブロックに対応するビット値をエラーマップテーブル
から読み出すことにより、行うことができる。ＭＣコン
トローラ２２は、参照フレームに対するエラーマップテ
ーブルを読み出し、参照エリアに含まれているマクロブ
ロックを示すビットの値が有効となっていると判断した
場合には、現在復号中のマクロブロックに対してエラー
コンシール処理を行う。

【００５１】条件３ＭＣコントローラ２２は、現在復
号中のマクロブロックがＢピクチャに属するマクロブロ
ックであり、そのＢピクチャの未来の参照フレームにお
ける現在復号中のマクロブロックと同位置のマクロブロ
ックがエラーコンシール処理されている場合に、現在復
号中のマクロブロックに対してエラーコンシール処理を
行う。例えば、表示順序でＩ_１→Ｂ_２→Ｐ_３と並んだフ
レームがあり、Ｐ_３の任意のマクロブロックに対してＩ
_１の画像で補間することにより、エラーコンシール処理
が行われていたとする。この場合、Ｂ_２に対してエラー
コンシール処理をしなければ、復号後の表示順序がＩ_１
→Ｂ_２→Ｉ_１となり、表示の時間的な整合性が取れなく
なる。そのため、Ｂピクチャに対しては、この条件３に
基づきエラーコンシール処理を行う。

【００５２】（Ｉ，Ｐピクチャから構成されるストリー
ムに対する処理）以下、ＩピクチャとＰピクチャとから
構成されているストリームに対するＭＣコントローラ２
２の処理例について説明をする。

【００５３】図４に、Ｉピクチャ及びＰピクチャから構
成されているストリームに対するＭＣコントローラ２２
の処理フローを示す。

【００５４】ＭＣコントローラ２２は、動き補償回路１
５に対して入力されるマクロブロック毎に、以下のステ
ップＳ１１〜ステップＳ２４の処理を繰り返し行う。

【００５５】まず、ステップＳ１１において、ＭＣコン
トローラ２２は、構文解析回路１１から与えられた情報
に基づき、復号対象のマクロブロックのマクロブロック
タイプを判断する。マクロブロックタイプがイントラマ
クロブロックであれば、ステップＳ１２に進み、インタ
ーマクロブロックであればステップＳ１８に進む。

【００５６】マクロブロックタイプがイントラマクロブ
ロックであった場合、ステップＳ１２において、ＭＣコ
ントローラ２２は、復号対象のマクロブロックに対し
て、構文解析回路１１からエラーフラグが与えられてい
るか否かを判断する。すなわち、復号対象のマクロブロ
ックにエラーが発生しているか否かを判断する。エラー
が発生していない場合には、ステップＳ１３に進み、エ
ラーが発生している場合には、ステップＳ１５に進む。

【００５７】ステップＳ１３において、ＭＣコントロー
ラ２２は、エラーマップテーブル上の復号対象のマクロ
ブロックに対応するビットの値を無効とする。つまり、
そのマクロブロックに対しては、エラーコンシール処理
がされなかったと示すように、エラーマップテーブルを
更新する。続いて、ステップＳ１４において、ＭＣコン
トローラ２２は、構文解析回路１１から与えられた動き
ベクトル及びマクロブロックモードを用いて通常の動き
補償処理を行い、本フローに対する処理を終了する。

【００５８】ステップＳ１５において、ＭＣコントロー
ラ２２は、動きベクトルの値をｘ＝０，ｙ＝０に設定す
るとともに、マクロブロックモードをフォワード予測モ
ードに設定する。つまり、過去の参照フレーム内におけ
る復号対象のマクロブロックと同一の位置のマクロブロ
ックを参照するように、動きベクトル及びマクロブロッ
クモードを設定する。続いて、ステップＳ１６におい
て、ＭＣコントローラ２２は、エラーマップテーブル上
の復号対象のマクロブロックに対応するビットの値を有
効とする。つまり、そのマクロブロックは、エラーコン
シール処理がされたと示すように、エラーマップテーブ
ルを更新する。続いて、ステップＳ１７において、ＭＣ
コントローラ２２は、ステップＳ１５で設定された動き
ベクトル及びマクロブロックモードを用いて動き補償処
理を行う。なお、この際に、セレクタ２１を切り換え
て、離散コサイン変換回路１４から供給される当該マク
ロブロックの画像データの入力を０とする。このステッ
プＳ１７の処理が上記条件１におけるエラーコンシール
処理となる。ＭＣコントローラ２２は、ステップＳ１７
の処理を終えると、本フローに対する処理を終了する。

【００５９】一方、マクロブロックタイプがインターマ
クロブロックであった場合、ステップＳ１８において、
ＭＣコントローラ２２は、復号対象のマクロブロックに
対して、構文解析回路１１からエラーフラグが与えられ
ているか否かを判断する。すなわち、復号対象のマクロ
ブロックにエラーが発生しているか否かを判断する。エ
ラーが発生していない場合には、ステップＳ１９に進
み、エラーが発生している場合には、ステップＳ２２に
進む。

【００６０】ステップＳ１９において、ＭＣコントロー
ラ２２は、参照エリアに含まれているマクロブロック
が、既にエラーコンシール処理がされているか否かを判
断する。

【００６１】このステップＳ１９は、例えば、以下の示
すプログラムを実行することにより、判断することがで
きる。

【００６２】10: Vector_xr = Vector_x >> 4 20: Vector_yr = Vector_y >> 4 30: If(Vector_x % 16! = 0) If(vector_x < 0) x_flag=-1 else x_flag = 1 else x_flag = 0 40: If(Vector_y % 16! = 0) If(vector_y < 0) y_flag=-1 else y_flag = 1 else y_flag = 0 50: MB_flag = { Error_Map[mb_adr_x + Vector_xr][mb
_adr_y + Vector_yr]or Error_Map[mb_adr_x + Vector_xr + x_flag][mb_adr_y
+ Vector_yr] or Error_Map[mb_adr_x + Vector_xr][mb_adr_y + Vector_
yr + y_flag] or Error_Map[mb_adr_x + Vector_xr + x_flag][mb_adr_y
+ Vector_yr + y_flag]} 60: if(MB_flag = 1) Search_MB_error = Yes 70: if(MB_flag = 0) Search_MB_error = No

【００６３】上記のプログラムの説明をする。

【００６４】１０行目では、２進数表現がされた本来の
動きベクトルのＸ方向の値（Vector_x）を４ビット右シ
フト演算し、変数Vectro_xrに代入している。１つのマ
クロブロックは１６×１６画素であることから、動きベ
クトルのＸ方向の値を１６で除算することによって、画
素単位で表された動きベクトルの値を、マクロブロック
単位で表した動きベクトルに換算することができる。つ
まり、この１０行目では、マクロブロック単位で換算し
たＸ方向の動きベクトル（Vector_xr）を求めている。

【００６５】２０行目では、２進数表現がされた本来の
動きベクトルのＹ方向の値（Vector_y）を４ビット右シ
フト演算し、変数Vectro_yrに代入している。つまり、
この２０行目では、マクロブロック単位で換算したＹ方
向の動きベクトル（Vector_yr）を求めている。

【００６６】３０行目では、本来の動きベクトルのＸ方
向の値（Vector_x）が１６で割り切れれば、変数x_flag
に０を代入し、割り切れず且つVector_xが負なら変数x_
flagに−１を代入し、割り切れず且つVector_xが負でな
ければ変数x_flagに１を代入する。すなわち、参照エリ
アのＸ方向の位置が、マクロブロックの境界位置と完全
に一致していればx_flagに０を代入し、一致していなけ
ればx_flagに１又は−１を代入する。一致していない場
合は、参照エリアが、Ｘ方向に２つのマクロブロックに
またがって位置することとなる。

【００６７】４０行目では、本来の動きベクトルのＸ方
向の値（Vector_y）が１６で割り切れれば、変数y_flag
に０を代入し、割り切れず且つVector_yが負なら変数y_
flagに−１を代入し、割り切れず且つVector_yが負でな
ければ変数y_flagに１を代入する。すなわち、参照エリ
アのＹ方向の位置が、マクロブロックの境界位置と完全
に一致していればy_flagに０を代入し、一致していなけ
ればy_flagに１又は−１を代入する。一致していない場
合は、参照エリアが、Ｙ方向に２つのマクロブロックに
またがって位置することとなる。

【００６８】５０行目では、エラーマップテーブル内を
参照して、参照エリアに含まれている全てのマクロブロ
ック（最大４つのマクロブロック）に対するエラーマッ
プテーブル内のビット値を求め、これらの論理和を演算
して、変数MB_flagに代入している。演算式Error_Map
[X][Y]は、エラーマップテーブル内のアドレスＸ、Ｙの
位置のビットを読み出している。mb_adr_xは、現在復号
しているマクロブロックのＸ方向のアドレスを示してお
り、mb_adr_yは、現在復号しているマクロブロックのＹ
方向のアドレスを示している。

【００６９】６０，７０行目では、変数MB_flagが１即
ち有効であれば、Search_MB_error =Yes（参照フレーム
に対するエラーマップテーブルにおける参照マクロブロ
ックに対応するビットの値が有効である）と判断し、変
数MB_flagが０即ち無効であれば、Search_MB_error = N
o（参照フレームに対するエラーマップテーブルにおけ
る参照マクロブロックに対応するビットの値が有効であ
る）と判断している。

【００７０】以上の１０行目〜７０行目の処理プログラ
ムを実行することによって、ＭＣコントローラ２２は、
参照エリアが既にエラーコンシール処理がされているか
否かを判断することができる。ＭＣコントローラ２２
は、参照エリアに対してエラーコンシール処理がされて
いないと判断する場合には、ステップＳ２０に進み、参
照エリアに対して既にエラーコンシール処理がされてい
ると判断する場合には、ステップＳ２２に進む。

【００７１】ステップＳ２０において、ＭＣコントロー
ラ２２は、復号対象のマクロブロックに対するエラーマ
ップテーブルにおけるそのマクロブロックに対応するビ
ットの値を無効とする。つまり、そのマクロブロックに
対しては、エラーコンシール処理がされなかったと示す
ように、エラーマップテーブルを更新する。続いて、ス
テップＳ２１において、ＭＣコントローラ２２は、構文
解析回路１１から与えられた動きベクトル及びマクロブ
ロックモードを用いて通常の動き補償処理を行い、本フ
ローに対する処理を終了する。

【００７２】ステップＳ２２において、ＭＣコントロー
ラ２２は、動きベクトルの値をｘ＝０，ｙ＝０に設定す
るとともに、マクロブロックモードをフォワード予測モ
ードに設定する。つまり、過去の参照フレーム内におけ
る復号対象のマクロブロックと同一の位置のマクロブロ
ックを参照するように、動きベクトル及びマクロブロッ
クモードを設定する。続いて、ステップＳ２３におい
て、ＭＣコントローラ２２は、復号対象のマクロブロッ
クに対するエラーマップテーブルにおけるそのマクロブ
ロックに対応するビットの値を有効とする。つまり、そ
のマクロブロックは、エラーコンシール処理がされたと
示すように、エラーマップテーブルを更新する。続い
て、ステップＳ２４において、ＭＣコントローラ２２
は、ステップＳ２２で設定された動きベクトル及びマク
ロブロックモードを用いて動き補償処理を行う。なお、
この際に、セレクタ２１を切り換えて、離散コサイン変
換回路１４から供給される当該マクロブロックの画像デ
ータの入力を０とする。このステップＳ２４の処理が上
記条件２でのエラーコンシール処理となる。ＭＣコント
ローラ２２は、ステップＳ２４の処理を終えると、本フ
ローに対する処理を終了する。

【００７３】以上の処理が、Ｉピクチャ及びＰピクチャ
から構成されているストリームに対するＭＣコントロー
ラ２２の処理である。

【００７４】つぎに、Ｉピクチャ及びＰピクチャから構
成されているストリームに対する具体的なエラーコンシ
ール処理内容を、図面を用いて説明をする。

【００７５】なお、以下、エラーコンシール処理の具体
的な処理例を説明するにあたり、１フレームが、横４
個、縦３個、合計１２個のマクロブロックから構成され
ているものとして説明を行う。フレーム内の各マクロブ
ロックは、図５Ａに示すように、番号を付けて位置を特
定するものとする。例えば、左から１番目，上から１番
目のマクロブロックはマクロブロックＭ_１と表し、左か
ら２番目，上から１番目のマクロブロックはマクロブロ
ックＭ_２と表し、左から１番目，上から２番目のマクロ
ブロックはマクロブロックＭ_３と表し、左から２番目，
上から２番目のマクロブロックはマクロブロックＭ_４と
表す。

【００７６】また、エラーマップテーブルのビットの値
は、図面中においては、図５Ｂに示すように、○で表現
するものとする。ビットの値が有効となっている部分は
○の中を黒く塗りつぶし、ビットの値が無効となってい
る部分は○の中を白抜きとする。また、○の中に記載し
ている数字は、対応するマクロブロックの番号である。

【００７７】また、任意のマクロブロックが動き補償を
行うために参照する参照エリアは、図面中には、図６に
示すように、片側に矢印をつけた直線と、点線の四角の
枠で表す。直線の始点（矢印が付いていない方の端部）
は、現在復号中のマクロブロックの中心位置を指し示
し、矢印の終端部分が現在復号中のマクロブロックの参
照エリアを指し示している。図６では、Ｐピクチャ（Ｐ
_１）のマクロブロック（Ｍ_１）が、Ｉピクチャ（Ｉ_０）
内のエリアを参照していることを表している。また、図
中のマクロブロックの中に“Ｉ”と記述しているもの
は、イントラマクロブロックを表しており、図中のマク
ロブロックの中に“Ｐ”と記述しているのはインターマ
クロブロックを表している。

【００７８】また、本例では、復号順序及び表示順序が
Ｐ_０→Ｉ_１→Ｐ_２→Ｐ_３→Ｉ_４と並べられているＩピク
チャとＰピクチャのみから構成されているエレメンタリ
ストリームに対する処理例を示している。

【００７９】まず、図７に示すように、Ｉピクチャ（Ｉ
_１）が復号される。Ｉ_１は、マクロブロック（Ｍ_３，Ｍ
_４）が伝送エラーであったとする。この場合、Ｉ_１のマ
クロブロック（Ｍ_３，Ｍ_４）に対してエラーコンシール
処理がされる。すなわち、Ｉ _１のマクロブロック
（Ｍ_３，Ｍ_４）が、Ｉ_１の１つ過去の参照フレームとな
り得るフレームであるＰピクチャ（Ｐ_０）のマクロブロ
ック（Ｍ_３，Ｍ_４）で補間される。Ｉ_１のエラーマップ
テーブルは、マクロブロック（Ｍ_３，Ｍ_４）のビットが
有効とされる。

【００８０】続いて、図８に示すように、Ｐピクチャ
（Ｐ_２）が復号される。Ｐ_２は、マクロブロック
（Ｍ_１，Ｍ_３，Ｍ_４）の参照エリアに、既にエラーコン
シール処理がされているＩ_１のマクロブロック（Ｍ_３，
Ｍ_４）が含まれているとする。この場合、Ｐ_２のマクロ
ブロック（Ｍ_１，Ｍ_３，Ｍ_４）に対してエラーコンシー
ル処理がされる。すなわち、Ｐ_２のマクロブロック（Ｍ
_１，Ｍ_３，Ｍ_４）が、Ｐ_２の参照フレームであるＩ_１の
Ｍ_１，Ｍ_３，Ｍ_４のマクロブロックで補間される。Ｐ_２
のエラーマップテーブルは、マクロブロック（Ｍ_１，Ｍ
_３，Ｍ_４）のビットが有効とされる。

【００８１】続いて、図９に示すように、Ｐピクチャ
（Ｐ_３）が復号されるとする。Ｐ_３のマクロブロック
（Ｍ_１，Ｍ_２，Ｍ_３）の参照エリアに、既にエラーコン
シール処理がされているＰ_２のマクロブロック（Ｍ_１，
Ｍ_３，Ｍ_４）が含まれているとする。この場合、Ｐ_３の
マクロブロック（Ｍ_１，Ｍ_２，Ｍ_３）に対してエラーコ
ンシール処理がされる。また、Ｐ_３のマクロブロック
（Ｍ_４）が伝送エラーであったとする。この場合、Ｐ_３
のマクロブロック（Ｍ_４）に対してエラーコンシール処
理がされる。すなわち、Ｐ_３のマクロブロック（Ｍ_１，
Ｍ_２，Ｍ_３，Ｍ_４）が、Ｐ_３の参照フレームであるＰ_２
のマクロブロック（Ｍ_１，Ｍ_２，Ｍ_３，Ｍ_４）で補間さ
れる。Ｐ_３のエラーマップテーブルは、マクロブロック
（Ｍ_１，Ｍ_２，Ｍ_３，Ｍ_４）のビットが有効とされる。

【００８２】（Ｉ，Ｐ，Ｂピクチャから構成されるスト
リームに対する処理）以下、Ｉピクチャ，Ｐピクチャ及
びＢピクチャから構成されているストリームに対するＭ
Ｃコントローラ２２の処理例について説明をする。

【００８３】図１０及び図１１に、Ｉピクチャ，Ｐピク
チャ及びＢピクチャから構成されているストリームに対
するＭＣコントローラ２２の処理フローを示す。

【００８４】ＭＣコントローラ２２は、動き補償回路１
５に対して入力されるマクロブロック毎に、以下のステ
ップＳ１０〜ステップＳ４３の処理を繰り返し行う。

【００８５】まず、ステップＳ１０において、ＭＣコン
トローラ２２は、構文解析回路１１から与えられた情報
に基づき、復号対象のマクロブロックが、Ｉピクチャに
属するマクロブロックか、Ｐピクチャに属するマクロブ
ロックか、Ｂピクチャに属するマクロブロックかを判断
する。Ｉピクチャ又はＰピクチャに属するマクロブロッ
クであった場合にはステップＳ１１に進み、Ｂピクチャ
に属するマクロブロックであった場合には、ステップＳ
３１に進む。

【００８６】Ｉピクチャ又はＰピクチャである場合に
は、ＭＣコントローラ２２は、図４に示したステップＳ
１１〜ステップＳ２３の処理と同一の処理を行う。

【００８７】Ｂピクチャである場合には、ステップＳ３
１において、ＭＣコントローラ２２は、構文解析回路１
１から与えられた情報に基づき、復号対象のマクロブロ
ックのマクロブロックタイプを判断する。マクロブロッ
クタイプがイントラマクロブロックであれば、ステップ
Ｓ３２に進み、インターマクロブロックであればステッ
プＳ３６に進む。

【００８８】マクロブロックタイプがイントラマクロブ
ロックであった場合、ステップＳ３２において、ＭＣコ
ントローラ２２は、復号対象のマクロブロックに対し
て、構文解析回路１１からエラーフラグが与えられてい
るか否かを判断する。すなわち、復号対象のマクロブロ
ックにエラーが発生しているか否かを判断する。エラー
が発生していない場合には、ステップＳ３３に進み、エ
ラーが発生している場合には、ステップＳ３７に進む。

【００８９】ステップＳ３３において、ＭＣコントロー
ラ２２は、未来の参照フレームに対するエラーマップテ
ーブルを参照し、現在復号中のマクロブロックと同一の
位置のマクロブロックが既にエラーコンシール処理がさ
れているか否かを判断する。エラーコンシール処理がさ
れていなければ、ステップＳ３４に進み、エラーコンシ
ール処理がされていれば、ステップＳ３５に進む。

【００９０】ステップＳ３４において、ＭＣコントロー
ラ２２は、構文解析回路１１から与えられた動きベクト
ル及びマクロブロックモードを用いて通常の動き補償処
理を行い、本フローに対する処理を終了する。

【００９１】ステップＳ３５において、ＭＣコントロー
ラ２２は、動きベクトルの値をｘ＝０，ｙ＝０に設定す
るとともに、マクロブロックモードをバックワード予測
モードに設定する。つまり、未来の参照フレーム内にお
ける復号対象のマクロブロックと同一の位置のマクロブ
ロックを参照するように、動きベクトル及びマクロブロ
ックモードを設定する。続いて、ステップＳ３６におい
て、ＭＣコントローラ２２は、ステップＳ３５で設定さ
れた動きベクトル及びマクロブロックモードを用いて動
き補償処理を行う。なお、この際に、セレクタ２１を切
り換えて、離散コサイン変換回路１４から供給される当
該マクロブロックの画像データの入力を０とする。この
ステップＳ３６の処理が、上記条件３におけるエラーコ
ンシール処理となる。ＭＣコントローラ２２は、ステッ
プＳ３６の処理を終えると、本フローに対する処理を終
了する。

【００９２】ステップＳ３７において、ＭＣコントロー
ラ２２は、動きベクトルの値をｘ＝０，ｙ＝０に設定す
るとともに、マクロブロックモードをフォワード予測モ
ードに設定する。つまり、過去の参照フレーム内におけ
る復号対象のマクロブロックと同一の位置のマクロブロ
ックを参照するように、動きベクトル及びマクロブロッ
クモードを設定する。続いて、ステップＳ３８におい
て、ＭＣコントローラ２２は、ステップＳ３７で設定さ
れた動きベクトル及びマクロブロックモードを用いて動
き補償処理を行う。なお、この際に、セレクタ２１を切
り換えて、離散コサイン変換回路１４から供給される当
該マクロブロックの画像データの入力を０とする。この
ステップＳ３８の処理が、上記条件１におけるエラーコ
ンシール処理となる。ＭＣコントローラ２２は、ステッ
プＳ３８の処理を終えると、本フローに対する処理を終
了する。

【００９３】一方、マクロブロックタイプがインターマ
クロブロックであった場合、ステップＳ３９において、
ＭＣコントローラ２２は、復号対象のマクロブロックに
対して、構文解析回路１１からエラーフラグが与えられ
ているか否かを判断する。すなわち、復号対象のマクロ
ブロックにエラーが発生しているか否かを判断する。エ
ラーが発生していない場合には、ステップＳ４０に進
み、エラーが発生している場合には、ステップＳ４２に
進む。

【００９４】ステップＳ４０において、ＭＣコントロー
ラ２２は、参照エリアに含まれているマクロブロック
が、既にエラーコンシール処理がされているか、或い
は、現在復号中のマクロブロックと同一の位置のマクロ
ブロックが既にエラーコンシール処理がされているかを
否かを判断する。

【００９５】このステップＳ４０は、例えば、以下の示
すプログラムを実行することにより、判断することがで
きる。

【００９６】10: f_Vector_xr = f_Vector_x >> 4 20: f_Vector_yr = f_Vector_y >> 4 30: If(f_Vector_x % 16! = 0) If(f_vector_x < 0) f_x_flag=-1 else f_x_flag = 1 else f_x_flag = 0 40: If(f_Vector_y % 16! = 0) If(f_vector_y < 0) f_y_flag=-1 else f_y_flag = 1 else f_y_flag = 0 50: b_Vector_xr = b_Vector_x >> 4 60: b_Vector_yr = b_Vector_y >> 4 70: If(b_Vector_x % 16! = 0) If(b_vector_x < 0) b_x_flag=-1 else b_x_flag = 1 else b_x_flag = 0 80: If(b_Vector_y % 16! = 0) If(b_vector_y < 0) b_y_flag=-1 else b_y_flag = 1 else b_y_flag = 0 90: f_MB_flag = { f_Error_Map[mb_adr_x + f_Vector_
xr][mb_adr_y + f_Vector_yr] or f_Error_Map[mb_adr_x + f_Vector_xr + f_x_flag][mb_
adr_y + f_Vector_yr] or f_Error_Map[mb_adr_x + f_Vector_xr][mb_adr_y + f_V
ector_yr + f_y_flag] or f_Error_Map[mb_adr_x + f_Vector_xr + f_x_flag][mb_
adr_y + f_Vector_yr +f_y_flag]} 100: b_MB_flag = { b_Error_Map[mb_adr_x + b_Vector
_xr][mb_adr_y + b_Vector_yr] or b_Error_Map[mb_adr_x + b_Vector_xr + b_x_flag][mb_
adr_y + b_Vector_yr] or b_Error_Map[mb_adr_x + b_Vector_xr][mb_adr_y + b_V
ector_yr + b_y_flag] or b_Error_Map[mb_adr_x + b_Vector_xr + b_x_flag][mb_
adr_y + b_Vector_yr +b_y_flag]} 110: c_MB_flag = b_Error_Map[mb_adr_x][mb_adr_y] 120: MB_flag = f_MB_flag or b_MB_flag or c_MB_flag 130: if(MB_flag = 1) Search_or_Future_MB_error = Y
es 140: if(MB_flag = 0) Search_or_Future_MB_error = N
o

【００９７】上記のプログラムの説明をする。

【００９８】１０行目では、２進数表現がされた本来の
順方向動きベクトルのＸ方向の値（f_Vector_x）を４ビ
ット右シフト演算し、変数f_Vectro_xrに代入してい
る。１つのマクロブロックは１６×１６画素であること
から、動きベクトルのＸ方向の値を１６で除算すること
によって、画素単位で表された動きベクトルの値を、マ
クロブロック単位で表した動きベクトルに換算すること
ができる。つまり、この１０行目では、マクロブロック
単位で換算したＸ方向の順方向動きベクトル（f_Vector
_xr）を求めている。なお、順方向動きベクトルとは、
過去の参照フレームを参照する動きベクトルのことであ
る。

【００９９】２０行目では、２進数表現がされた本来の
順方向動きベクトルのＹ方向の値（f_Vector_y）を４ビ
ット右シフト演算し、変数f_Vectro_yrに代入してい
る。つまり、この２０行目では、マクロブロック単位で
換算したＹ方向の順方向動きベクトル（f_Vector_yr）
を求めている。

【０１００】３０行目では、本来の順方向動きベクトル
のＸ方向の値（f_Vector_x）が１６で割り切れれば、変
数f_x_flagに０を代入し、割り切れず且つf_Vector_xの
値が負ならば変数f_x_flagに−１を代入し、割り切れず
且つf_Vector_xの値が負でなければ変数f_x_flagに１を
代入する。すなわち、過去の参照フレームに対する参照
エリアのＸ方向の位置が、マクロブロックの境界位置と
完全に一致していればf_x_flagに０を代入し、一致して
いなければf_x_flagに１又は−１を代入する。一致して
いない場合は、過去の参照フレームに対する参照エリア
が、Ｘ方向に２つのマクロブロックにまたがって位置す
ることとなる。

【０１０１】４０行目では、本来の順方向動きベクトル
のＹ方向の値（f_Vector_y）が１６で割り切れれば、変
数f_y_flagに０を代入し、割り切れず且つf_Vector_yの
値が負ならば変数f_y_flagに−１を代入し、割り切れず
且つf_Vector_yの値が負でなければ変数f_y_flagに１を
代入する。すなわち、過去の参照フレームに対する参照
エリアのＹ方向の位置が、マクロブロックの境界位置と
完全に一致していればf_y_flagに０を代入し、一致して
いなければf_y_flagに１又は−１を代入する。一致して
いない場合は、過去の参照フレームに対する参照エリア
が、Ｙ方向に２つのマクロブロックにまたがって位置す
ることとなる。

【０１０２】５０行目では、２進数表現がされた本来の
逆方向動きベクトルのＸ方向の値（b_Vector_x）を４ビ
ット右シフト演算し、変数b_Vectro_xrに代入してい
る。１つのマクロブロックは１６×１６画素であること
から、動きベクトルのＸ方向の値を１６で除算すること
によって、画素単位で表された動きベクトルの値を、マ
クロブロック単位で表した動きベクトルに換算すること
ができる。つまり、この５０行目では、マクロブロック
単位で換算したＸ方向の逆方向動きベクトル（b_Vector
_xr）を求めている。なお、逆方向動きベクトルとは、
未来の参照フレームを参照する動きベクトルのことであ
る。

【０１０３】６０行目では、２進数表現がされた本来の
逆方向動きベクトルのＹ方向の値（b_Vector_y）を４ビ
ット右シフト演算し、変数b_Vectro_yrに代入してい
る。つまり、この６０行目では、マクロブロック単位で
換算したＹ方向の逆方向動きベクトル（b_Vector_yr）
を求めている。

【０１０４】７０行目では、本来の順方向動きベクトル
のＸ方向の値（b_Vector_x）が１６で割り切れれば、変
数b_x_flagに０を代入し、割り切れず且つb_Vector_xの
値が負ならば変数b_x_flagに−１を代入し、割り切れず
且つb_Vector_xの値が負でなければ変数b_x_flagに１を
代入する。すなわち、過去の参照フレームに対する参照
エリアのＸ方向の位置が、マクロブロックの境界位置と
完全に一致していればb_x_flagに０を代入し、一致して
いなければb_x_flagに１又は−１を代入する。一致して
いない場合は、過去の参照フレームに対する参照エリア
が、Ｘ方向に２つのマクロブロックにまたがって位置す
ることとなる。

【０１０５】８０行目では、本来の順方向動きベクトル
のＹ方向の値（b_Vector_y）が１６で割り切れれば、変
数b_y_flagに０を代入し、割り切れず且つb_Vector_yの
値が負ならば変数b_y_flagに−１を代入し、割り切れず
且つf_Vector_bの値が負でなければ変数b_y_flagに１を
代入する。すなわち、過去の参照フレームに対する参照
エリアのＹ方向の位置が、マクロブロックの境界位置と
完全に一致していればb_y_flagに０を代入し、一致して
いなければb_y_flagに１又は−１を代入する。一致して
いない場合は、過去の参照フレームに対する参照エリア
が、Ｙ方向に２つのマクロブロックにまたがって位置す
ることとなる。

【０１０６】９０行目では、過去の参照フレームに対す
るエラーマップテーブル内を参照して、参照エリアに含
まれている全てのマクロブロック（最大４つのマクロブ
ロック）に対するエラーマップテーブル内のビット値を
求め、これらの論理和を演算して、変数f_MB_flagに代
入している。演算式f_Error_Map[X][Y]は、過去の参照
フレームのエラーマップテーブル内のアドレスＸ、Ｙの
位置のビットを読み出している。mb_adr_xは、現在復号
しているマクロブロックのＸ方向のアドレスを示してお
り、mb_adr_yは、現在復号しているマクロブロックのＹ
方向のアドレスを示している。

【０１０７】１００行目では、未来の参照フレームに対
するエラーマップテーブル内を参照して、参照エリアに
含まれている全てのマクロブロック（最大４つのマクロ
ブロック）に対するエラーマップテーブル内のビット値
を求め、これらの論理和を演算して、変数b_MB_flagに
代入している。演算式b_Error_Map[X][Y]は、未来の参
照フレームのエラーマップテーブル内のアドレスＸ、Ｙ
の位置のビットを読み出している。

【０１０８】１１０行目では、未来の参照フレームに対
するエラーマップテーブル内を参照して、現在復号中の
マクロブロックと同位置にあるマクロブロックに対する
エラーマップテーブル内のビット値を求め、変数c_MB_f
lagに代入している。

【０１０９】１２０行目では、変数f_MB_flag変数，b_M
B_flag，変数c_MB_flagの論理和演算をして、MB_flagに
代入している。

【０１１０】１３０，１４０行目では、変数MB_flagが
１即ち有効であれば、Search_or_Future_MB_error = Ye
s（参照フレームに対するエラーマップテーブルにおけ
る参照マクロブロックに対応するビットの値が有効であ
る、或いは、現在復号中のマクロブロックと同一の位置
のマクロブロックが既にエラーコンシール処理がされて
いる。）と判断し、変数MB_flagが０即ち無効であれ
ば、Search_or_Future_MB_error = No（参照フレームに
対するエラーマップテーブルにおける参照マクロブロッ
クに対応するビットの値が有効ではない、且つ、現在復
号中のマクロブロックと同一の位置のマクロブロックが
既にエラーコンシール処理がされていない）と判断して
いる。

【０１１１】以上の１０行目〜１４０行目の処理プログ
ラムを実行することによって、ＭＣコントローラ２２
は、参照エリアが既にエラーコンシール処理がされてい
るか、或いは、現在復号中のマクロブロックと同一の位
置のマクロブロックが既にエラーコンシール処理がされ
ているか否かを判断することができる。ＭＣコントロー
ラ２２は、参照エリアに対してエラーコンシール処理が
されていないと判断する場合には、ステップＳ４１に進
み、参照エリアに対して既にエラーコンシール処理がさ
れていると判断する場合には、ステップＳ４２に進む。

【０１１２】ステップＳ４１において、ＭＣコントロー
ラ２２は、ＭＣコントローラ２２は、構文解析回路１１
から与えられた動きベクトル及びマクロブロックモード
を用いて通常の動き補償処理を行い、本フローに対する
処理を終了する。

【０１１３】ステップＳ４２において、ＭＣコントロー
ラ２２は、動きベクトルの値をｘ＝０，ｙ＝０に設定す
るとともに、マクロブロックモードをバックワード予測
モードに設定する。つまり、未来の参照フレーム内にお
ける復号対象のマクロブロックと同一の位置のマクロブ
ロックを参照するように、動きベクトル及びマクロブロ
ックモードを設定する。続いて、ステップＳ４３におい
て、ＭＣコントローラ２２は、ステップＳ４２で設定さ
れた動きベクトル及びマクロブロックモードを用いて動
き補償処理を行う。なお、この際に、セレクタ２１を切
り換えて、離散コサイン変換回路１４から供給される当
該マクロブロックの画像データの入力を０とする。この
ステップＳ４３の処理が、上記条件２又は３のエラーコ
ンシール処理となる。ＭＣコントローラ２２は、ステッ
プＳ４３の処理を終えると、本フローに対する処理を終
了する。

【０１１４】以上の処理が、Ｉピクチャ，Ｐピクチャ及
びＢピクチャから構成されているストリームに対するＭ
Ｃコントローラ２２の処理である。

【０１１５】つぎに、Ｉピクチャ，Ｐピクチャ及びＢピ
クチャから構成されているストリームに対する具体的な
エラーコンシール処理内容を、図面を用いて説明をす
る。

【０１１６】なお、図面中の説明は、上述したＩ，Ｐピ
クチャから構成されているストリームで用いた説明条件
と同一の条件である。また、本例では、復号順序がＰ１
０→Ｂ９→Ｉ２→Ｂ１→Ｐ３と並べられ、表示順序がＢ
９→Ｐ１０→Ｂ１→Ｉ２→Ｐ３と並べられているエレメ
ンタリストリームに対する処理例を示している。

【０１１７】まず、図１２に示すように、Ｉピクチャ
（Ｉ_２）が復号される。Ｉ_２は、マクロブロック
（Ｍ_３，Ｍ_４）が伝送エラーであったとする。この場
合、Ｉ_２のマクロブロック（Ｍ_３，Ｍ_４）に対してエラ
ーコンシール処理がされる。すなわち、Ｉ_２のマクロブ
ロック（Ｍ_３，Ｍ_４）が、Ｉ_２の１つ過去の参照フレー
ムとなりえるフレームであるＰピクチャ（Ｐ_１０）のマ
クロブロック（Ｍ_３，Ｍ_４）で補間される。Ｉ_２のエラ
ーマップテーブル（第２のエラーマップテーブル）は、
マクロブロック（Ｍ_３，Ｍ_４）のビットが有効とされ
る。

【０１１８】続いて、図１３に示すように、Ｂピクチャ
（Ｂ_１）が復号される。

【０１１９】Ｂ_１のマクロブロック（Ｍ_１）の参照エリ
アは、過去の参照フレームＰ_１０のマクロブロック（Ｍ
_１〜Ｍ_４）並びに未来の参照フレームＩ_２のマクロブロ
ック（Ｍ_１〜Ｍ_２）が含まれている。この場合、過去の
参照フレームＰ１０のＭ_４が既にエラーコンシール処理
がされているので、Ｂ_１のマクロブロック（Ｍ_１）は、
エラーコンシール処理がされる。

【０１２０】Ｂ_１のマクロブロック（Ｍ_２）は、イント
ラマクロブロックであり、且つ、エラーが発生していな
いので、エラーコンシール処理はされない。

【０１２１】Ｂ_１のマクロブロック（Ｍ_３）の参照エリ
アは、過去の参照フレームＰ_１０のマクロブロック（Ｍ
_３〜Ｍ_６）並びに未来の参照フレームＩ_２のマクロブロ
ック（Ｍ_３，Ｍ_５）が含まれている。この場合、過去の
参照フレームＰ_１０のマクロブロック（Ｍ_４）及び未来
の参照フレームＩ_２のマクロブロック（Ｍ_３）が既にエ
ラーコンシール処理がされているので、Ｂ_１のマクロブ
ロック（Ｍ_３）は、エラーコンシール処理がされる。

【０１２２】Ｂ_１のマクロブロック（Ｍ_４）の参照エリ
アには、既にエラーコンシール処理がされているマクロ
ブロックは、過去にも未来にも含まれていない。しかし
ながら、当該マクロブロックＭ_４と同一の位置にある未
来の参照フレームＩ_２のマクロブロックＭ_４が既にエラ
ーコンシール処理がされている。従って、このＢ_１のマ
クロブロックＭ_４もエラーコンシール処理がされる。

【０１２３】続いて、図１４に示すように、Ｐピクチャ
（Ｐ_３）が復号される。

【０１２４】このＰピクチャ（Ｐ_３）では、前回Ｐピク
チャ（Ｐ_１０）のエラーコンシール情報が格納されてい
た第１のエラーマップテーブルに対して、ビットが更新
される。

【０１２５】以上のように、ＭＰＥＧ復号装置１０で
は、動き予測を利用した符号化データを復号することが
できる。また、ＭＰＥＧ復号装置１０では、エラーコン
シール処理を行うことにより、例えば伝送時等に破壊さ
れてしまった画像ブロックがフレーム内に存在する場合
でも、その画像ブロックを破壊されていない他のフレー
ムの画像ブロックで補間することができる。そのため、
エラーが生じてしまい、周辺の正常な画像と極端に異な
ってしまうブロックがあることによる視覚な違和感を低
減することができる。

【０１２６】さらに、本ＭＰＥＧ復号装置１０では、復
号中の画像のブロックが動き補償でエラーを含むフレー
ムを参照している場合であっても、エラーコンシール処
理に伴うエラーの伝播を抑え、画質劣化を少なくするこ
とができる。

【０１２７】

【発明の効果】本発明にかかる画像復号装置及び方法で
は、エラーマップテーブルを参照して参照エリアに含ま
れるブロックにエラーブロックが含まれている場合、又
は、復号対象ブロックの動画像符号化データが破損して
いる場合には、復号対象ブロック内の画素を復号済みの
フレームの画素で補間して出力するエラーコンシール処
理を行い、上記エラーコンシール処理を行ったブロック
をエラーブロックとしたエラーマップテーブルを生成し
ている。

【０１２８】そのため、本発明にかかる画像復号装置及
び方法では、エラーコンシール処理が行われるので、動
き予測を利用した符号化データを復号することができ
る。また、本発明では、エラーコンシール処理を行うこ
とにより、例えば伝送時等に破壊されてしまった画像ブ
ロックがフレーム内に存在する場合でも、その画像ブロ
ックを破壊されていない他のフレームの画像ブロックで
補間することができる。従って、エラーが生じてしま
い、周辺の正常な画像と極端に異なってしまうブロック
があることによる視覚な違和感を低減することができ
る。

【０１２９】また、本発明にかかる画像復号装置では、
復号中の画像のブロックが動き補償でエラーを含むフレ
ームを参照している場合であっても、エラーコンシール
処理に伴うエラーの伝播を抑え、画質劣化を少なくする
ことができる。

【図面の簡単な説明】

【図１】本発明の実施の形態のＭＰＥＧ復号装置のブロ
ック構成図である。

【図２】エラーマップテーブルを示す図である。

【図３】他の形式のエラーマップテーブルを示す図であ
る。

【図４】Ｉピクチャ及びＰピクチャから構成されている
ストリームに対するＭＣコントローラの処理を示すフロ
ーチャートである。

【図５】フレーム内のマクロブロックの構成及びエラー
マップテーブルを示す図である。

【図６】参照エリアの説明をするための図である。

【図７】Ｉピクチャ及びＰピクチャから構成されている
ストリームに対する具体的なエラーコンシール処理内容
を説明するための図である。

【図８】上記図７に続く状態を示す図である。

【図９】上記図８に続く状態を示す図である。

【図１０】Ｉピクチャ，Ｐピクチャ及びＢピクチャから
構成されているストリームに対するＭＣコントローラの
処理を示すフローチャートである。

【図１１】上記図１０に続くフローチャートである。

【図１２】Ｉピクチャ，Ｐピクチャ及びＢピクチャから
構成されているストリームに対する具体的なエラーコン
シール処理内容を説明するための図である。

【図１３】上記図１２に続く状態を示す図である。

【図１４】上記図１３に続く状態を示す図である。

【図１５】従来のＭＰＥＧ復号装置のブロック構成図で
ある。

【図１６】エラーコンシール処理がされたマクロブロッ
クの影響が、時間的，空間的に伝播していく状態につい
て説明をするための図である。

【図１７】上記図１６に続く状態を示す図である。

【図１８】上記図１７に続く状態を示す図である。

【符号の説明】

１０ＭＥＰＧ復号装置、１１構文解析回路、１２
ＶＬＣテーブル、１３逆量子化回路、１４逆離散コサ
イン変換回路、１５動き補償回路、１６フレームメモ
リ、１７カラーフォーマット変換回路、１８エラー
コントローラ、１９エラーマップテーブル格納部、２
１セレクタ、２２ＭＣコントローラ、２３加算器

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5C059 MA00 MA04 MA05 MA14 MA23 MC11 ME01 PP05 PP06 PP07 RF07 RF11 RF14 UA05 5J064 AA00 BA04 BA16 BB01 BB04 BC01 BC02 BC08 BC09 BC16 BC25 BC29 BD02

Claims

【特許請求の範囲】

【請求項１】フレーム内を複数のブロックに分割し、
このブロック単位で動き予測符号化が行われる符号化方
式で符号化された動画像符号化データを、復号する画像
復号装置において、動き予測符号化が行われたブロックが復号対象ブロック
となっている場合、上記画像符号化データに含まれてい
る動き予測情報を用いて復号済みのフレーム上の参照エ
リアを特定し、特定した参照エリアの情報を用いて復号
対象ブロックに対して動き補償を行う動き補償手段と、上記動き補償を行う際に参照する復号済みのフレームに
対するエラーマップテーブルを保持するエラーマップテ
ーブル保持手段とを備え、上記エラーマップテーブルには、復号済みのフレーム内
に存在するエラーブロックが示されており、上記動き補償手段は、上記エラーマップテーブルを参照
して上記参照エリアに含まれるブロックにエラーブロッ
クが含まれている場合、又は、復号対象ブロックの動画
像符号化データが破損している場合には、復号対象ブロ
ック内の画素を復号済みのフレームの画素で補間して出
力するエラーコンシール処理を行い、上記エラーコンシ
ール処理を行ったブロックをエラーブロックとしたエラ
ーマップテーブルを生成し、上記エラーマップテーブル
保持手段に格納することを特徴とする画像復号装置。
【請求項２】上記動き補償手段は、エラーコンシール
処理を行う場合、復号対象ブロック内の画素を、当該復
号対象ブロックと同一の位置にある復号済みフレームの
画素で補間することを特徴とする請求項１記載の画像復
号装置。
【請求項３】上記動き補償手段は、他のフレームを参照せずに符号化がされたブロックのみ
から構成されるフレーム内予測フレーム、又は、他のフ
レームを参照せずに符号化がされたブロック及び過去の
フレームを参照して動き予測がされたブロックを含んで
構成される順方向予測フレームに対してエラーコンシー
ル処理を行う場合には、復号対象ブロックが含まれているフレームよりも過去の
フレームの画素を用いて、復号対象ブロック内の画素を
補間することを特徴とする請求項１記載の画像復号装
置。
【請求項４】上記動き補償手段は、フレーム内予測フ
レームに対してエラーコンシール処理を行う場合には、
当該フレーム内予測フレームの直前の順方向予測フレー
ムの画素を用いて、復号対象ブロック内の画素を補間す
ることを特徴とする請求項３記載の画像復号装置。
【請求項５】上記動き補償手段は、順方向予測フレー
ムに対してエラーコンシール処理を行う場合には、当該
順方向予測フレームの参照フレームの画素を用いて、復
号対象ブロック内の画素を補間することを特徴とする請
求項３記載の画像復号装置。
【請求項６】上記動き補償手段は、過去及び/又は未来のフレームを参照して動き予測をす
ることが可能な双方向予測フレームに対してエラーコン
シール処理を行う場合には、復号対象ブロックが含まれているフレームよりも未来の
参照フレームの画素を用いて、復号対象ブロック内の画
素を補間することを特徴とする請求項１記載の画像復号
装置。
【請求項７】上記動き補償手段は、上記双方向予測フ
レームに対してエラーコンシール処理を行う場合には、
当該双方向予測フレームの未来の参照フレームの画素を
用いて、復号対象ブロック内の画素を補間することを特
徴とする請求６記載の画像復号装置。
【請求項８】上記動き補償手段は、過去及び/又は未
来のフレームを参照して動き予測をすることが可能な双
方向予測フレームに対して動き補償を行う場合、当該双方向予測フレームの未来の参照フレームのブロッ
クのうち、復号対象ブロックと同位置のブロックが既に
エラーコンシール処理をされている場合には、上記未来
の参照フレームの画素を用いて、復号対象ブロック内の
画素を補間することを特徴とする請求項１記載の画像復
号装置。
【請求項９】フレーム内を複数のブロックに分割し、
このブロック単位で動き予測符号化が行われる符号化方
式で符号化された動画像符号化データを、復号する画像
復号方法において、上記画像符号化データに含まれている動き予測情報を用
いて復号済みのフレーム上の参照エリアを特定し、特定
した参照エリアの情報を用いて復号対象ブロックに対し
て動き補償を行って、動画像符号化データを復号し、上記動き補償を行う際に、復号済みのフレーム内に存在するエラーブロックが示さ
れたエラーマップテーブルを参照して上記参照エリアに
含まれるブロックにエラーブロックが含まれている場
合、又は、復号対象ブロックの動画像符号化データが破
損している場合には、復号対象ブロック内の画素を復号
済みのフレームの画素で補間して出力するエラーコンシ
ール処理を行い、上記エラーコンシール処理を行ったブロックをエラーブ
ロックとした上記エラーマップテーブルを生成すること
を特徴とする画像復号方法。
【請求項１０】エラーコンシール処理を行う場合、復
号対象ブロック内の画素を、当該復号対象ブロックと同
一の位置にある復号済みフレームの画素で補間すること
を特徴とする請求項９記載の画像復号方法。
【請求項１１】他のフレームを参照せずに符号化がさ
れたブロックのみから構成されるフレーム内予測フレー
ム、又は、他のフレームを参照せずに符号化がされたブ
ロック及び過去のフレームを参照して動き予測がされた
ブロックを含んで構成される順方向予測フレームに対し
てエラーコンシール処理を行う場合には、復号対象ブロックが含まれているフレームよりも過去の
フレームの画素を用いて、復号対象ブロック内の画素を
補間することを特徴とする請求項９記載の画像復号方
法。
【請求項１２】フレーム内予測フレームに対してエラ
ーコンシール処理を行う場合には、当該フレーム内予測
フレームの直前の順方向予測フレームの画素を用いて、
復号対象ブロック内の画素を補間することを特徴とする
請求項１１記載の画像復号方法。
【請求項１３】順方向予測フレームに対してエラーコ
ンシール処理を行う場合には、当該順方向予測フレーム
の参照フレームの画素を用いて、復号対象ブロック内の
画素を補間することを特徴とする請求項１１記載の画像
復号方法。
【請求項１４】過去及び/又は未来のフレームを参照
して動き予測をすることが可能な双方向予測フレームに
対してエラーコンシール処理を行う場合には、復号対象
ブロックが含まれているフレームよりも未来の参照フレ
ームの画素を用いて、復号対象ブロック内の画素を補間
することを特徴とする請求項９記載の画像復号方法。
【請求項１５】上記双方向予測フレームに対してエラ
ーコンシール処理を行う場合には、当該双方向予測フレ
ームの未来の参照フレームの画素を用いて、復号対象ブ
ロック内の画素を補間することを特徴とする請求項１４
記載の画像復号方法。
【請求項１６】過去及び/又は未来のフレームを参照
して動き予測をすることが可能な双方向予測フレームに
対して動き補償を行う場合、当該双方向予測フレームの未来の参照フレームのブロッ
クのうち、復号対象ブロックと同位置のブロックが既に
エラーコンシール処理をされている場合には、上記未来
の参照フレームの画素を用いて、復号対象ブロック内の
画素を補間することを特徴とする請求項９記載の画像復
号方法。