JP2002271799A - 動画像処理装置、動画像処理方法、及び動画像処理プログラム - Google Patents

Abstract

(57)【要約】 【課題】 動画像を符号化する場合に、符号化処理すべ
きデータ量をより少なくする。 【解決手段】 第１の画像とこの画像以後の第２の画像
とを含む動画像を再生するためのデータを符号化出力す
る場合に、差分算出部１１において、第１の画像と第２
の画像との差分値を求める。動きブロック抽出部１２で
は、差分算出部１１において求めた差分値が所定閾値を
越える動きブロックを抽出する。そして、第１の画像に
ついてのデータに続いて、動きブロックについてのデー
タを、データ出力部１３から符号化出力する。これによ
り、第１の画像についてのデータと動きブロックについ
てのデータとを合成して動画像を再生できるようにす
る。 【効果】 動きのない背景部分等を省き、動きのある部
分のみを符号化して出力するので、符号化すべきデータ
量をより少なくすることができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像処理装置、動画
像処理方法、及び動画像処理プログラムに関し、特にＭ
ＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔ
ｓ Ｇｒｏｕｐ）４規格の形状符号化を行う画像処理装
置、動画像処理方法、及び動画像処理プログラムに関す
る。

【０００２】

【従来の技術】ＭＰＥＧ規格の１つであるＭＰＥＧ４に
おける、ｃｏｒｅｐｒｏｆｉｌｅ符号化処理において
は、動画像に含まれている物体の形状を抽出し、この抽
出した形状のデータについて符号化処理を行う。このｃ
ｏｒｅｐｒｏｆｉｌｅ符号化は、ＤＣＴ（Ｄｉｓｃｒｅ
ｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理のよう
に８画素×８画素のブロック単位で処理するのではな
く、２値データの形状信号を足して符号化するものであ
る。

【０００３】

【発明が解決しようとする課題】上述したｃｏｒｅｐｒ
ｏｆｉｌｅ符号化においては、形状情報が複雑であり、
符号化すべきデータ量が多いという問題がある。このた
め、符号化すべきデータ量を削減し、処理の単純化が望
まれている。本発明は上述した従来技術の欠点を解決す
るためになされたものであり、その目的は符号化すべき
データ量がより少ない画像処理装置、動画像処理方法、
及び動画像処理プログラムを提供することである。

【０００４】

【課題を解決するための手段】本発明の請求項１による
画像処理装置は、第１の画像とこの画像以後の第２の画
像とを含む動画像を再生するためのデータを符号化出力
する動画像処理装置であって、前記第１の画像と前記第
２の画像との差分値を求める差分算出手段と、前記差分
算出手段において求めた差分値が所定閾値を越える動き
ブロックを抽出する動きブロック抽出手段と、前記第１
の画像についてのデータに続いて、前記動きブロックに
ついてのデータを符号化出力するデータ出力手段と、を
含み、前記第１の画像についてのデータと前記動きブロ
ックについてのデータとを合成して動画像を再生できる
ようにしたことを特徴する。

【０００５】本発明の請求項２による画像処理装置は、
請求項１において、前記差分算出手段においては、前記
第１の画像と前記第２の画像との差分値を画素単位に求
め、前記動きブロック抽出手段においては、前記差分算
出手段において求めた差分値が所定閾値を越える画素を
含む動きブロックを抽出することを特徴とする。本発明
の請求項３による画像処理装置は、請求項１又は２にお
いて、前記差分算出手段において画素単位に求めた差分
値について、孤立点を除去する手段を更に含み、この孤
立点除去後の差分値について、前記動きブロック抽出手
段において所定閾値を越える画素を含む動きブロックを
抽出することを特徴する。

【０００６】本発明の請求項４による画像処理装置は、
請求項１において、前記差分算出手段においては、前記
第１の画像における動きベクトルと前記第２の画像にお
ける動きベクトルとの差分値を、画像の処理単位である
ブロック毎に求め、前記動きブロック抽出手段において
は、前記差分算出手段において求めた動きベクトルの差
分値が所定閾値を越える動きブロックを抽出することを
特徴とする。

【０００７】本発明の請求項５による画像処理装置は、
請求項１〜４のいずれかにおいて、前記データ出力手段
においては、前記動きブロック抽出手段において抽出さ
れる動きブロックの数が、前記第２の画像全体を構成す
るブロックの数の半数以上を占める場合にのみ、前記第
１の画像についてのデータ及び前記動きブロックについ
てのデータを符号化出力することを特徴とする。

【０００８】本発明の請求項６による画像処理装置は、
請求項１〜５のいずれかにおいて、前記差分算出手段に
よって差分値を求める前に、前記第１の画像及び前記第
２の画像について所定の空間平滑フィルタ処理を行うこ
とを特徴とする。本発明の請求項７による画像処理方法
は、第１の画像とこの画像以後の第２の画像とを含む動
画像を再生するためのデータを符号化出力する動画像処
理方法であって、前記第１の画像と前記第２の画像との
差分値を求める差分算出ステップと、前記差分算出ステ
ップにおいて求めた差分値が所定閾値を越える動きブロ
ックを抽出する動きブロック抽出ステップと、前記第１
の画像についてのデータに続いて、前記動きブロックに
ついてのデータを符号化出力するデータ出力ステップ
と、を含み、前記第１の画像についてのデータと前記動
きブロックについてのデータとを合成して動画像を再生
できるようにしたことを特徴する。

【０００９】本発明の請求項８による画像処理方法は、
請求項７において、前記差分算出ステップにおいては、
前記第１の画像と前記第２の画像との差分値を画素単位
に求め、前記動きブロック抽出ステップにおいては、前
記差分算出ステップにおいて求めた差分値が所定閾値を
越える画素を含む動きブロックを抽出することを特徴と
する。

【００１０】本発明の請求項９による画像処理方法は、
請求項７又は８において、前記差分算出ステップにおい
て画素単位に求めた差分値について、孤立点を除去する
ステップを更に含み、この孤立点除去後の差分値につい
て、前記動きブロック抽出ステップにおいて所定閾値を
越える画素を含む動きブロックを抽出することを特徴す
る。

【００１１】本発明の請求項１０による画像処理方法
は、請求項７において、前記差分算出ステップにおいて
は、前記第１の画像における動きベクトルと前記第２の
画像における動きベクトルとの差分値を、画像の処理単
位であるブロック毎に求め、前記動きブロック抽出ステ
ップにおいては、前記差分算出ステップにおいて求めた
動きベクトルの差分値が所定閾値を越える動きブロック
を抽出することを特徴とする。

【００１２】本発明の請求項１１による画像処理方法
は、請求項７〜１０のいずれかにおいて、前記データ出
力ステップにおいては、前記動きブロック抽出ステップ
において抽出される動きブロックの数が、前記第２の画
像全体を構成するブロックの数の半数以上を占める場合
にのみ、前記第１の画像についてのデータ及び前記動き
ブロックについてのデータを符号化出力することを特徴
とする。

【００１３】本発明の請求項１２による画像処理方法
は、請求項７〜１１のいずれかにおいて、前記差分算出
ステップによって差分値を求める前に、前記第１の画像
及び前記第２の画像について所定の空間平滑フィルタ処
理を行うことを特徴とする。本発明の請求項１３による
画像処理プログラムは、第１の画像とこの画像以後の第
２の画像とを含む動画像を再生するためのデータを符号
化出力する動画像処理プログラムであって、前記第１の
画像と前記第２の画像との差分値を求める差分算出ステ
ップと、前記差分算出ステップにおいて求めた差分値が
所定閾値を越える動きブロックを抽出する動きブロック
抽出ステップと、前記第１の画像についてのデータに続
いて、前記動きブロックについてのデータを符号化出力
するデータ出力ステップと、を含み、前記第１の画像に
ついてのデータと前記動きブロックについてのデータと
を合成して動画像を再生できるようにしたことを特徴す
る。

【００１４】本発明の請求項１４による画像処理プログ
ラムは、請求項１３において、前記差分算出ステップに
おいては、前記第１の画像と前記第２の画像との差分値
を画素単位に求め、前記動きブロック抽出ステップにお
いては、前記差分算出ステップにおいて求めた差分値が
所定閾値を越える画素を含む動きブロックを抽出するこ
とを特徴とする。

【００１５】本発明の請求項１５による画像処理プログ
ラムは、請求項１３又は１４において、前記差分算出ス
テップにおいて画素単位に求めた差分値について、孤立
点を除去するステップを更に含み、この孤立点除去後の
差分値について、前記動きブロック抽出ステップにおい
て所定閾値を越える画素を含む動きブロックを抽出する
ことを特徴する。

【００１６】本発明の請求項１６による画像処理プログ
ラムは、請求項１３において、前記差分算出ステップに
おいては、前記第１の画像における動きベクトルと前記
第２の画像における動きベクトルとの差分値を、画像の
処理単位であるブロック毎に求め、前記動きブロック抽
出ステップにおいては、前記差分算出ステップにおいて
求めた動きベクトルの差分値が所定閾値を越える動きブ
ロックを抽出することを特徴とする。

【００１７】本発明の請求項１７による画像処理プログ
ラムは、請求項１３〜１６のいずれかにおいて、前記デ
ータ出力ステップにおいては、前記動きブロック抽出ス
テップにおいて抽出される動きブロックの数が、前記第
２の画像全体を構成するブロックの数の半数以上を占め
る場合にのみ、前記第１の画像についてのデータ及び前
記動きブロックについてのデータを符号化出力すること
を特徴とする。

【００１８】本発明の請求項１８による画像処理プログ
ラムは、請求項１３〜１７のいずれかにおいて、前記差
分算出ステップによって差分値を求める前に、前記第１
の画像及び前記第２の画像について所定の空間平滑フィ
ルタ処理を行うことを特徴とする。要するに、動きのな
い背景部分等を省き、動きのある部分のみを符号化して
出力するので、符号化すべきデータ量をより少なくする
ことができる。これにより、処理を単純化することがで
きる。処理はブロック単位で行うので、任意形状符号化
時の場合のような、合成画像での境界の不自然さの問題
はない。

【００１９】

【発明の実施の形態】次に、図面を参照して本発明の実
施の形態について説明する。なお、以下の説明において
参照する各図では、他の図と同等部分は同一符号によっ
て示されている。図１は本発明による動画像処理装置の
実施の一形態を示すブロック図である。同図に示されて
いるように、本実施形態による動画像処理装置は、最初
の画像である第１の画像とこの画像以後の画像である第
２の画像との差分値を求める差分算出部１１と、差分算
出部１１において求めた差分値が所定閾値を越える動き
ブロックを抽出する動きブロック抽出部１２と、第１の
画像についてのデータに続いて、動きブロックについて
のデータを符号化出力するデータ出力部１３とを含んで
構成されている。

【００２０】かかる構成において、最初のフレーム（第
１の画像）は基準画像として画像全面を符号化して出力
する。この画像は、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈ
ｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）
画像である。次に、そのフレームに連続する次のフレー
ム（第２の画像）については、そのフレーム（第１の画
像）を基準に、動きがあるブロックのみを符号化する。
この場合、ＤＣＴ処理の単位であるブロック単位で、そ
のブロック内に動きがあるか判断する。これにより、ブ
ロック中に動きがあるものと動きがないものとに分け、
動きがあるブロックのみを符号化する。より具体的に
は、第１の画像とそれに連続する第２の画像について、
ブロック毎に画素同士の差分値を算出する。そして、算
出した差分値が所定の閾値よりも大きい場合には、その
画素に動きがあると判断する。この閾値を設けるのは、
ノイズの影響を避けるためである。例えば、各画素単位
でＹＵＶ又はＲＧＢ各々の値についてある範囲を設定し
（例えば、８ビット画像であればプラスマイナス５）、
その範囲内であれば動きがないと判断する。

【００２１】以上の符号化処理においては、３０フレー
ム等、複数のフレーム単位を画像処理の対象とする。こ
の画像処理対象とする複数のフレームについては、必要
であれば予めバッファ等に蓄積しておき、それを読出し
て処理しても良い。以上のように符号化されて出力され
たデータは、復号され、最初のフレームと順次合成され
ることによって、もとの画像が復元される。

【００２２】なお、画像中の動きがあるブロックの占め
る割合がある値以上（例えば、５０％すなわち半数以
上）だった場合は、かえって符号量が増えるので、上記
の符号化処理を行うのは適当ではない。また、連続する
２つの画像同士の差分値を検出した後のデータについ
て、拡散・縮退や孤立点除去等の処理を行っても良い。
この処理によって、ノイズの除去や、極小さな領域の除
去を行うことができ、この除去後にブロック単位で動き
領域が含まれるブロックであるか、そうでないか判断す
る。

【００２３】以上の処理について、さらに図２を参照し
て説明する。同図は、図１に示されている動画像処理装
置における画像処理方法を示すフローチャートである。
同図において、まず、最初の画像であるか判断する（ス
テップＳ１０１）。最初の画像である場合は、その画像
全体を符号化する（ステップＳ１０１→Ｓ１０５）。こ
の符号化したデータを出力する（ステップＳ１０６）。

【００２４】また、ステップＳ１０１において、最初の
画像でなければ、最初の画像との差分値を算出する（ス
テップＳ１０１→Ｓ１０２）。差分値を検出した後、孤
立点を除去する等の処理を行う（ステップＳ１０３）。
以上処理は、画像を構成する各ブロックそれぞれについ
て、画素単位で行う。孤立点除去後の差分値が所定の閾
値を越えない場合には、動きがないと判断し、次の画素
について処理する（ステップＳ１０４→Ｓ１０２）。孤
立点除去後の差分値が所定の閾値を越える場合には、動
きがあると判断し、その画素を含むブロックについて符
号化する（ステップＳ１０４→Ｓ１０５）。この符号化
したデータを出力する（ステップＳ１０６）。

【００２５】以上のように符号化処理するため、本装置
においては、以下のような動画像処理方法が実現されて
いることになる。すなわち、第１の画像とこの画像以後
の第２の画像とを含む動画像を再生するためのデータを
符号化出力する動画像処理方法であり、上記第１の画像
と上記第２の画像との差分値を求める差分算出ステップ
と、上記差分算出ステップにおいて求めた差分値が所定
閾値を越える動きブロックを抽出する動きブロック抽出
ステップと、上記第１の画像についてのデータに続い
て、上記動きブロックについてのデータを符号化出力す
るデータ出力ステップと、を含み、上記第１の画像につ
いてのデータと上記動きブロックについてのデータとを
合成して動画像を再生できるようにした動画像処理方法
が実現されていることになる。

【００２６】そして、差分算出ステップにおいては、上
記第１の画像と上記第２の画像との差分値を画素単位に
求め、上記動きブロック抽出ステップにおいては、上記
差分算出ステップにおいて求めた差分値が所定閾値を越
える画素を含む動きブロックを抽出する。また、上記差
分算出ステップにおいて画素単位に求めた差分値につい
て、孤立点を除去するステップを更に含み、この孤立点
除去後の差分値について、上記動きブロック抽出ステッ
プにおいて所定閾値を越える画素を含む動きブロックを
抽出する。

【００２７】さらに、上記データ出力ステップにおいて
は、上記動きブロック抽出ステップにおいて抽出される
動きブロックの数が、上記第２の画像全体を構成するブ
ロックの数の半数以上を占める場合にのみ、上記第１の
画像についてのデータ及び上記動きブロックについての
データを符号化出力する。以上のように符号化処理する
ことにより、符号化は動きがあるブロックのみ行えば良
いので、符号量が少なくて済む。また、復号処理におけ
る画像の合成は、２つの画像データを重ね合わせるのみ
で良いので、処理が非常に簡単である。なお、本発明に
よる動画像処理においては、動きのある部分のみ符号化
するので、テレビジョン放送中のコマーシャル部分（Ｃ
Ｍ）等、背景があまり動いていない画像について特に適
している。

【００２８】ここで、図２等に示されている動作を実現
するためのプログラムを用意し、これによってコンピュ
ータを制御すれば、上述と同様に動画像符号化処理を行
うことができることは明白である。このプログラムを記
録保持する記録媒体には、図１等に示されていない半導
体メモリ、磁気ディスク、光ディスク等の他、種々の記
録媒体を用いることができる。

【００２９】ところで、以上の処理は、複数のフレーム
単位について処理するので、適用できる範囲が広い。以
下、本発明の発展例について説明する。 （発展例１）動画像処理において、データ量が多いの
は、矩形形状符号化・形状符号化共に最初の１フレーム
である。そこで、最初のフレームのデータ全てを出力す
るのではなく、後のフレームにおいてデータが存在しな
い範囲のみを出力するようにすれば、データ量がより少
なくて済む。

【００３０】（発展例２）画像全体の動きベクトルを、
ブロック単位で求め、その値のある割合（例えば、５０
％）がすべて同じであり、かつ、動きベクトルが複数の
連続するフレームで同様であった場合（例えば、３０フ
レーム）、その多数を占める動きベクトルとは異なった
値を持つブロックのみを符号化する。

【００３１】その３０フレームを通して、動きベクトル
が同じであったブロックを統合することにより、画像を
作成し、この画像を符号化する。復号の場合、フレーム
単位で、この統合画像と符号化されたブロックとを合成
して、もとの画像を復元する。このように、動きベクト
ルに着目して処理することにより、カメラが平行移動し
ている場合等においても適用することができるので、適
用範囲がより広くなる。動きベクトルに着目して処理す
る場合、図２中のステップＳ１０２においては、上記第
１の画像における動きベクトルと上記第２の画像におけ
る動きベクトルとの差分値を、画像の処理単位であるブ
ロック毎に求め、同図中のステップＳ１０４において
は、上記差分算出ステップにおいて求めた動きベクトル
の差分値が所定閾値を越える動きブロックを抽出するこ
とになる。

【００３２】（発展例３）画像中に高周波ノイズが多く
含まれる場合は、その影響を除去するために、予め３×
３の空間平滑化フィルタ処理を施しておく。この場合、
上述した図２に示されている処理を行う前に、上記の第
１の画像及び第２の画像について所定の空間平滑フィル
タ処理を行う。

【００３３】（発展例４）最初のフレームのデータを重
ね合わせないで表示すれば、動きがあるブロックのみの
画像となるが、重要情報は動きがある部分に含まれてい
ることが多く、このデータを優先的に扱うことで、重要
情報が漏れる心配が少なくなる。例えば、ＭＰＥＧ４の
エラー処理では、順方向の他、逆方向から処理を行う。
この際、動きのあるブロックについてのみ、そのように
処理する。こうすることにより、動きがあるブロックを
優先的に扱い、重要情報が漏れる心配が少なくなる。

【００３４】（発展例５）本装置を搭載する機器に動き
センサを設けておき、この動きセンサによって機器が動
いていないことを検出したとき、本装置の機能を有効に
しても良い。 （発展例６）処理対象となる動画像が背景画像と人物等
の動きのある画像とから構成される場合、背景画像全体
を別に作成しておき、これを先に出力し、その後に動き
のある部分の画像データのみを出力しても良い。こうす
れば１枚ずつ出力するよりも、処理が簡単である。

【００３５】

【発明の効果】以上説明したように本発明は、動きのな
い背景部分等を省き、動きのある部分のみを符号化して
出力することにより、符号化すべきデータ量をより少な
くすることができ、処理を単純化することができるとい
う効果がある。

【図面の簡単な説明】

【図１】本発明による動画像処理装置の実施の一形態を
示すブロック図である。

【図２】本発明による動画像処理方法の処理手順を示す
フローチャートである。

【符号の説明】

１１ 差分算出部 １２ 動きブロック抽出部 １３ データ出力部

Claims (18)

【特許請求の範囲】
1. 【請求項１】 第１の画像とこの画像以後の第２の画像
   とを含む動画像を再生するためのデータを符号化出力す
   る動画像処理装置であって、 前記第１の画像と前記第２の画像との差分値を求める差
   分算出手段と、 前記差分算出手段において求めた差分値が所定閾値を越
   える動きブロックを抽出する動きブロック抽出手段と、 前記第１の画像についてのデータに続いて、前記動きブ
   ロックについてのデータを符号化出力するデータ出力手
   段と、 を含み、前記第１の画像についてのデータと前記動きブ
   ロックについてのデータとを合成して動画像を再生でき
   るようにしたことを特徴する動画像処理装置。
2. 【請求項２】 前記差分算出手段においては、前記第１
   の画像と前記第２の画像との差分値を画素単位に求め、 前記動きブロック抽出手段においては、前記差分算出手
   段において求めた差分値が所定閾値を越える画素を含む
   動きブロックを抽出することを特徴とする請求項１記載
   の動画像処理装置。
3. 【請求項３】 前記差分算出手段において画素単位に求
   めた差分値について、孤立点を除去する手段を更に含
   み、この孤立点除去後の差分値について、前記動きブロ
   ック抽出手段において所定閾値を越える画素を含む動き
   ブロックを抽出することを特徴する請求項１又は２記載
   の動画像処理装置。
4. 【請求項４】 前記差分算出手段においては、前記第１
   の画像における動きベクトルと前記第２の画像における
   動きベクトルとの差分値を、画像の処理単位であるブロ
   ック毎に求め、 前記動きブロック抽出手段においては、前記差分算出手
   段において求めた動きベクトルの差分値が所定閾値を越
   える動きブロックを抽出することを特徴とする請求項１
   記載の動画像処理装置。
5. 【請求項５】 前記データ出力手段においては、前記動
   きブロック抽出手段において抽出される動きブロックの
   数が、前記第２の画像全体を構成するブロックの数の半
   数以上を占める場合にのみ、前記第１の画像についての
   データ及び前記動きブロックについてのデータを符号化
   出力することを特徴とする請求項１〜４のいずれかに記
   載の動画像処理装置。
6. 【請求項６】 前記差分算出手段によって差分値を求め
   る前に、前記第１の画像及び前記第２の画像について所
   定の空間平滑フィルタ処理を行うことを特徴とする請求
   項１〜５のいずれかに記載の動画像処理装置。
7. 【請求項７】 第１の画像とこの画像以後の第２の画像
   とを含む動画像を再生するためのデータを符号化出力す
   る動画像処理方法であって、 前記第１の画像と前記第２の画像との差分値を求める差
   分算出ステップと、 前記差分算出ステップにおいて求めた差分値が所定閾値
   を越える動きブロックを抽出する動きブロック抽出ステ
   ップと、 前記第１の画像についてのデータに続いて、前記動きブ
   ロックについてのデータを符号化出力するデータ出力ス
   テップと、 を含み、前記第１の画像についてのデータと前記動きブ
   ロックについてのデータとを合成して動画像を再生でき
   るようにしたことを特徴する動画像処理方法。
8. 【請求項８】 前記差分算出ステップにおいては、前記
   第１の画像と前記第２の画像との差分値を画素単位に求
   め、 前記動きブロック抽出ステップにおいては、前記差分算
   出ステップにおいて求めた差分値が所定閾値を越える画
   素を含む動きブロックを抽出することを特徴とする請求
   項７記載の動画像処理方法。
9. 【請求項９】 前記差分算出ステップにおいて画素単位
   に求めた差分値について、孤立点を除去するステップを
   更に含み、この孤立点除去後の差分値について、前記動
   きブロック抽出ステップにおいて所定閾値を越える画素
   を含む動きブロックを抽出することを特徴する請求項７
   又は８記載の動画像処理方法。
10. 【請求項１０】 前記差分算出ステップにおいては、前
    記第１の画像における動きベクトルと前記第２の画像に
    おける動きベクトルとの差分値を、画像の処理単位であ
    るブロック毎に求め、 前記動きブロック抽出ステップにおいては、前記差分算
    出ステップにおいて求めた動きベクトルの差分値が所定
    閾値を越える動きブロックを抽出することを特徴とする
    請求項７記載の動画像処理方法。
11. 【請求項１１】 前記データ出力ステップにおいては、
    前記動きブロック抽出ステップにおいて抽出される動き
    ブロックの数が、前記第２の画像全体を構成するブロッ
    クの数の半数以上を占める場合にのみ、前記第１の画像
    についてのデータ及び前記動きブロックについてのデー
    タを符号化出力することを特徴とする請求項７〜１０の
    いずれかに記載の動画像処理方法。
12. 【請求項１２】 前記差分算出ステップによって差分値
    を求める前に、前記第１の画像及び前記第２の画像につ
    いて所定の空間平滑フィルタ処理を行うことを特徴とす
    る請求項７〜１１のいずれかに記載の動画像処理方法。
13. 【請求項１３】 第１の画像とこの画像以後の第２の画
    像とを含む動画像を再生するためのデータを符号化出力
    する動画像処理プログラムであって、 前記第１の画像と前記第２の画像との差分値を求める差
    分算出ステップと、 前記差分算出ステップにおいて求めた差分値が所定閾値
    を越える動きブロックを抽出する動きブロック抽出ステ
    ップと、 前記第１の画像についてのデータに続いて、前記動きブ
    ロックについてのデータを符号化出力するデータ出力ス
    テップと、 を含み、前記第１の画像についてのデータと前記動きブ
    ロックについてのデータとを合成して動画像を再生でき
    るようにしたことを特徴する動画像処理プログラム。
14. 【請求項１４】 前記差分算出ステップにおいては、前
    記第１の画像と前記第２の画像との差分値を画素単位に
    求め、 前記動きブロック抽出ステップにおいては、前記差分算
    出ステップにおいて求めた差分値が所定閾値を越える画
    素を含む動きブロックを抽出することを特徴とする請求
    項１３記載の動画像処理プログラム。
15. 【請求項１５】 前記差分算出ステップにおいて画素単
    位に求めた差分値について、孤立点を除去するステップ
    を更に含み、この孤立点除去後の差分値について、前記
    動きブロック抽出ステップにおいて所定閾値を越える画
    素を含む動きブロックを抽出することを特徴する請求項
    １３又は１４記載の動画像処理プログラム。
16. 【請求項１６】 前記差分算出ステップにおいては、前
    記第１の画像における動きベクトルと前記第２の画像に
    おける動きベクトルとの差分値を、画像の処理単位であ
    るブロック毎に求め、 前記動きブロック抽出ステップにおいては、前記差分算
    出ステップにおいて求めた動きベクトルの差分値が所定
    閾値を越える動きブロックを抽出することを特徴とする
    請求項１３記載の動画像処理プログラム。
17. 【請求項１７】 前記データ出力ステップにおいては、
    前記動きブロック抽出ステップにおいて抽出される動き
    ブロックの数が、前記第２の画像全体を構成するブロッ
    クの数の半数以上を占める場合にのみ、前記第１の画像
    についてのデータ及び前記動きブロックについてのデー
    タを符号化出力することを特徴とする請求項１３〜１６
    のいずれかに記載の動画像処理プログラム。
18. 【請求項１８】 前記差分算出ステップによって差分値
    を求める前に、前記第１の画像及び前記第２の画像につ
    いて所定の空間平滑フィルタ処理を行うことを特徴とす
    る請求項１３〜１７のいずれかに記載の動画像処理プロ
    グラム。