JP2010081241A5 - - Google Patents

Claims (11)

1. 符号化対象の画像フレームを分割したブロック単位で参照フレームに対してなされた動き検出の結果を用いて動き補償フレーム間予測符号化を行い、該参照フレームを複数の参照フレームの候補から選択可能な動画像符号化装置であって、
   入力された画像フレームを一時的に保存する入力画像フレーム保存手段と、
   前記入力画像フレーム保存手段に保存された前記画像フレームに基づき生成した参照候補フレームの複数を保存する参照候補フレーム保存手段と、
   前記入力画像フレーム保存手段から出力された画像フレームから顔領域を検出して該顔領域に含まれる顔パーツをさらに検出し、該顔パーツの状態を判定する判定手段と、
   前記判定手段に判定された前記顔パーツの前記状態を、該顔パーツが含まれる前記画像フレームを示す情報に関連付けて保存する顔パーツ情報保存手段と、
   前記顔パーツ情報保存手段から、前記入力画像フレーム保存手段から出力された符号化対象フレームから前記判定手段で検出され判定された前記顔パーツの状態と一致する状態の顔パーツを含み、且つ、該符号化対象フレームが参照可能な前記画像フレームを示す情報を検索する検索手段と、
   前記参照候補フレーム保存手段に保存された前記複数の参照候補フレームのうち、前記検索手段で検索された前記画像フレームを示す情報に対応する該参照候補フレームを、前記符号化対象フレームの前記顔パーツに対応する前記ブロックの前記参照フレームに決定する参照フレーム決定手段と
   を有し、
   前記参照フレーム決定手段で決定された前記参照フレームを用いて前記符号化対象フレームに対する動き補償フレーム間予測符号化を行う
   ことを特徴とする動画像符号化装置。
2. 前記判定手段は、前記顔領域に含まれる目または口のうち少なくとも一方を顔パーツとして検出する
   ことを特徴とする請求項１に記載の動画像符号化装置。
3. 前記判定手段は、前記顔パーツの状態として前記目または口の開き具合を判定する
   ことを特徴とする請求項２に記載の動画像符号化装置。
4. 前記判定手段は、前記顔パーツの状態として前記目または口が開いているか閉じているかを判定する
   ことを特徴とする請求項２または請求項３に記載の動画像符号化装置。
5. 前記検索手段は、前記入力画像フレーム保存手段から出力された１の前記符号化対象フレームについて、該符号化対象フレームから前記判定手段で検出され判定された前記顔パーツ毎に前記検索を行い、
   前記参照フレーム決定手段は、前記検索手段で前記顔パーツ毎に検索された前記画像フレームを示す情報それぞれについて、対応する前記参照候補フレームを決定する
   ことを特徴とする請求項１乃至請求項４の何れか１項に記載の動画像符号化装置。
6. 前記検索手段は、前記顔パーツ情報保存手段に保存された前記画像フレームを示す情報のうち、前記符号化対象フレームに対して時間的に近い方から順に、前記画像フレームを示す情報を検索する
   ことを特徴とする請求項１乃至請求項５の何れか１項に記載の動画像符号化装置。
7. 前記検索手段は、前記顔パーツの状態が一致する前記画像フレームを示す情報が検索されなかったら、前記顔パーツ情報保存手段に保存された前記画像フレームを示す情報のうち、前記符号化対象フレームが参照可能で、且つ、該画像フレームに対して時間的に最も近い前記画像フレームを示す情報を検索結果とする
   ことを特徴とする請求項１乃至請求項６の何れか１項に記載の動画像符号化装置。
8. 前記検索手段は、前記顔パーツの状態が一致する前記画像フレームを示す情報が検索されなかったら、前記顔パーツ情報保存手段に保存された前記画像フレームを示す情報のうち、前記符号化対象フレームが参照可能で、且つ、該顔パーツの状態が最も近い前記画像フレームを示す情報を検索結果とする
   ことを特徴とする請求項１乃至請求項６の何れか１項に記載の動画像符号化装置。
9. 前記入力画像フレーム保存手段から前記画像フレームを分割したブロック単位で読み出した画像データの参照フレームに対する動き検出を行う動き検出手段と、
   前記動き検出手段による前記動き検出の結果に基づき、前記ブロック単位の前記画像データに対して動き補償フレーム間予測を行う動き補償手段と
   をさらに有し、
   前記参照候補フレームは、
   前記入力画像フレーム保存手段から前記ブロック単位で読み出した画像データに対して前記動き補償手段で動き補償フレーム間予測された画像データに基づき生成される
   ことを特徴とする請求項１乃至請求項８の何れか１項に記載の動画像符号化装置。
10. 符号化対象の画像フレームを分割したブロック単位で参照フレームに対してなされた動き検出の結果を用いて動き補償フレーム間予測符号化を行い、該参照フレームを複数の参照フレームの候補から選択可能な動画像符号化装置における動画像符号化方法であって、
    前記動画像符号化装置の制御手段が、入力された画像フレームを入力画像フレーム保存手段に一時的に保存する入力画像フレーム保存ステップと、
    前記制御手段が、前記入力画像フレーム保存手段に保存された前記画像フレームに基づき生成した参照候補フレームの複数を参照候補フレーム保存手段に保存する参照候補フレーム保存ステップと、
    前記動画像符号化装置の判定手段が、前記入力画像フレーム保存手段から出力された画像フレームから顔領域を検出して該顔領域に含まれる顔パーツをさらに検出し、該顔パーツの状態を判定する判定ステップと、
    前記制御手段が、前記判定ステップに判定された前記顔パーツの前記状態を、該顔パーツが含まれる前記画像フレームを示す情報に関連付けて顔パーツ情報保存手段に保存する顔パーツ情報保存ステップと、
    前記動画像符号化装置の検索手段が、前記顔パーツ情報保存手段から、前記入力画像フレーム保存手段から出力された符号化対象フレームから前記判定ステップで検出され判定された前記顔パーツの状態と一致する状態の顔パーツを含み、且つ、該符号化対象フレームが参照可能な前記画像フレームを示す情報を検索する検索ステップと、
    前記動画像符号化装置の参照フレーム決定手段が、前記参照候補フレーム保存手段に保存された前記複数の参照候補フレームのうち、前記検索ステップで検索された前記画像フレームを示す情報に対応する該参照候補フレームを、前記符号化対象フレームの前記顔パーツに対応する前記ブロックの前記参照フレームに決定する参照フレーム決定ステップと
    を有し、
    前記制御手段が、前記参照フレーム決定ステップで決定された前記参照フレームを用いて前記符号化対象フレームに対する動き補償フレーム間予測符号化を行う
    ことを特徴とする動画像符号化方法。
11. コンピュータを請求項１乃至請求項９の何れか１項に記載の動画像符号化装置の各手段として機能させるプログラム。